统一日志数据流图

打开网易新闻 查看精彩图片

日志系统数据流图

系统进行日志收集的过程可以分为三个环节：

(1)日志收集和导入ElasticSearch

(2)ElasticSearch进行索引等处理

(3)可视化操作，查询等

Logstash可以结合Redis或者Rabbitmq、Kafka等消息中间件收集应用服务器产生的日志，经过简单的过滤等操作后发送到ElasticSearch，ElasticSearch进行相关的索引处理，最后在Kibana进行相关的可视化操作。