Suntoma的博客

喜爱技术、喜欢设计、喜欢一切美的事物

filebeat+ELK搭建

filebeat安装 安装环境: filebeat-6.3.1-linux-x86_64 下载地址:https://www.elastic.co/downloads/beats/filebeat   安装步骤: 1.上传介质: filebeat-6.3.1-linux-x86_64....

2018-07-26 16:04:13

阅读数:119

评论数:0

关于flume Header头信息乱码解析问题

在生产环境消费kafka传输过来的flume的采集信息的时候,发现flume的header的头信息有乱码现象出现,例如<0x04><0x10>hostname<0x1a&g...

2018-07-26 15:07:07

阅读数:183

评论数:0

利用storm个性化存储hdfs(更改storm-hdfs插件源码)

        在项目过程中,有这样一个需求,需要用storm消费实时流日志,存储hdfs,如果伙伴们要是抱着自己开发存储的心态去做,可能会耗费一定的开发周期,比较不划算,因为官方做了一个storm-hdfs的开发包供storm使用者轻松开发storm程序存储hdfs,但是这个包中是按固定路径去存...

2018-07-26 15:03:13

阅读数:48

评论数:0

利用storm1.0的窗口机制做pv统计(二)

       在第一版里我着重的讲述了如何利用storm1.0带的窗口机制来做pv统计,而在(二)里面,我是基于(一)的升级,首先我还是来描述一下业务场景:        随着业务高峰期的到来,kafka中计算数据的qps急速增加,而计算资源的紧张导致cpu也直线飙升,所以计算延迟,服务down...

2018-07-26 14:55:52

阅读数:48

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭