flum
思故乡
这个作者很懒,什么都没留下…
展开
-
flum执行原理及测试案例&&串联(负载均衡)
Flume 是 Cloudera 提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的软件数据采集数据从无到有的过程数据搬运传输的过程flume是一个日志采集、聚合、汇总传输的软件。数据搬运的过程。flume具有三个核心组件source:对接各个不同种类的数据源sink:对接各个不同数据存放的目的地(下沉地)channel:中间用于临时缓存数据的以上三个组件...原创 2019-02-23 17:22:23 · 503 阅读 · 0 评论 -
flum静态拦截器
现在要求:把 A、B 机器中的 access.log、nginx.log、web.log 采集汇总到 C 机器上然后统一收集到 hdfs 中。但是在 hdfs 中要求的目录为:/source/logs/access/20190101/**/source/logs/nginx/20190101/**/source/logs/web/20190101/**① 在服务器 A 和服务器 B...原创 2019-02-23 17:53:36 · 272 阅读 · 0 评论