日志系统
文章平均质量分 79
caixingyunzi
修身、齐家、治国、平天下。。。
展开
-
ELK5.2+kafka+zookeeper+filebeat集群部署
架构图考虑到日志系统的可扩展性以及目前的资源(部分功能复用),整个ELK架构如下:架构解读 : (整个架构从左到右,总共分为5层)第一层、数据采集层最左边的是业务服务器集群,上面安装了filebeat做日志采集,同时把采集的日志分别发送给两个logstash服务(17.162、17.163)第二层、数据处理层,数据缓存层logstash服务把接受到的日志经过格式处理...原创 2017-07-12 10:38:50 · 2189 阅读 · 0 评论 -
Python Elasticsearch模块的使用
参考URL: https://es.xiaoleilu.com/054_Query_DSL/70_Important_clauses.html http://www.cnblogs.com/letong/p/4749234.html背景最近发现某类日志每天几十万,但是有几百条的丢失,为了查找原因,首先要拿到数据对比,于是乎,就把ES中的数据导出来插入库中和原始数据进行对比,就有了下面的...原创 2018-08-21 16:08:04 · 2805 阅读 · 0 评论