Flume
文章平均质量分 78
flume
ChenJieYaYa
这个作者很懒,什么都没留下…
展开
-
Flume配置5——配置flume采集tomcat,nginx运行日志,入库到 hdfs中
5.在node1的/jobs/t10下创建tomcatlog-flume-avro.conf文件vim tomcatlog-flume-avro.conf6.在node1的/jobs/t10下创建avro2-flume-logger.conf文件vim avro2-flume-logger.conf7.启动顺序flume321bin/flume-ng agent --conf conf --conf-filejobs/t10/avro2-flume-logger.conf --na原创 2022-07-03 18:44:36 · 864 阅读 · 0 评论 -
Flume配置4——自定义MYSQLSource
3.添加配置信息,不是spring项目,所以没有使用yml配置jdbc.propertieslog4j. properties4.SQLSourceHelper说明代码分析代码实现5.SQLSource6.两个jar放入flume的lib目录下项目jarmysql7./jobs/t9下编写配置文件vim mysql-flume-logger.conf8.建库,建表建库建表插4条数据10.类似于如图结果输出则成功.原创 2022-07-03 17:41:28 · 191 阅读 · 0 评论 -
Flume配置3——自定义Source+Sink
Flume配置4——自定义Source+Sink原创 2022-06-28 20:59:20 · 196 阅读 · 0 评论 -
Flume配置2——拦截器过滤
Flume配置2——拦截器过滤原创 2022-06-28 20:47:27 · 990 阅读 · 0 评论 -
Flume配置1——基础案例
Flume配置1——基础案例原创 2022-06-28 20:06:18 · 1419 阅读 · 0 评论 -
Flume理论
2.定义Flume基于流式架构,灵活简单适用于实时推送事件,尤其是在数据流是持续的且量级很大的情况Flume组成架构1.简单架构图SourceChannelSinkEventAgent内部原理1.图解原创 2022-06-28 19:24:31 · 104 阅读 · 0 评论