Flume
stone_fall
程序员+宅男
展开
-
Flume实例二 | 监控服务器Lynis日志上传远端hbase | 联级 | avro
文章目录联级agent创建hbase表创建目录客户端flume配置大数据端联级agent采集资产漏洞扫描日志/var/log/lynis.log,agent端agent.properties,大数据端hbase.properties。启动两个采集服务,客户端start-agent.sh和大数据端start-h.sh创建hbase表create 'T_WARNING_LYNIS', {NAME => 'BASIC_INFO', VERSIONS => 3, BLOCKCACHE =>原创 2020-06-16 21:16:39 · 226 阅读 · 0 评论 -
Flume实例一 | 监控服务器Lynis日志上传hdfs | 监控目录上传hdfs
由于lynis的日志是直接覆盖原来的文件,似乎无法通过exec等source对其进行监控(我写的agent都shut down了)。如果有同学成功了并且愿意分享的话,我不甚感激。所以我的尝试以下:思路为,通过shell监控lynis日志目录,如果有新日志以**时间命名的方式**就存储在目标目录`/var/log/lynis/cp_logs`中,再通过`Spooling Directory Source`的`flume agent`对目录进行监控。原创 2020-05-30 08:25:44 · 851 阅读 · 0 评论 -
Centos 7 | Flume 安装与初步使用 | telnet
环境产品版本Centos 73.10.0-1062.9.1.el7.x86_64flumeapache-flume-1.9.0-bin安装与配置下载地址清华镜像https://mirrors.tuna.tsinghua.edu.cn/apache/flume/解压tar -zxvf apache-flume-1.9.0-bin.tar.gz创建软链接ln -s apache-flume-1.8.0-bin/ flume配置环境变量vi ~/.b原创 2020-05-18 15:38:49 · 780 阅读 · 0 评论