flume
文章平均质量分 85
dwjf321
这个作者很懒,什么都没留下…
展开
-
Flume 从 0 到 1 学习 —— 第四章 Flume高级之自定义 MySQLSource
文章目录1. 自定义Source说明2. 自定义 MysqlSource 组成4. 代码实现4.1 导入 pom.xml 依赖4.2 添加配置信息4.3 SQLSourceHelper4.4 MySQLSource5. 测试5.1 Jar 包准备5.2 配置文件准备5.3 MySql 表准备5.4 测试并查看结果 1. 自定义Source说明 Source 是负责接收数据到 Flume Agent 的组件。Source组件可以处理各种类型、各种格式的日志数据,包括avro、thrift、exec、jms、s原创 2021-01-11 17:47:34 · 423 阅读 · 0 评论 -
Flume 从 0 到 1 学习 —— 第三章 Flume 监控之 Ganglia
文章目录1. Ganglia的安装与部署2. 操作 Flume 测试监控 1. Ganglia的安装与部署 安装httpd服务与php [dwjf321@hadoop102 flume]$ sudo yum -y install httpd php 安装其他依赖 [dwjf321@hadoop102 flume]$ sudo yum -y install apr-devel 安装 ganglia [ˈgæŋgliə] [dwjf321@hadoop102 flume]$ sudo rpm原创 2021-01-11 17:45:51 · 388 阅读 · 0 评论 -
Flume 从 0 到 1 学习 —— 第二章 Flume 快速入门
flume 安装、配置、自定义拦截器原创 2021-01-11 17:42:31 · 880 阅读 · 0 评论 -
Flume 从 0 到 1 学习 —— 第一章 Flume 介绍
文章目录1. Flume 定义2. Flume 组成架构2.1 Agent2.2 Source2.3 Channel2.4 Sink2.5 Event3. Flume 拓扑结构 1. Flume 定义 Flume 是 Cloudera 提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输系统。Flume 基于流式架构、灵活简单。 2. Flume 组成架构 Flume 组成架构,如图 1-1、1-2 所示: 图 1-1 Flume 组成架构 Flume组成架构详解,如图所示: 图 1-2 F原创 2021-01-11 17:38:13 · 425 阅读 · 0 评论