Flume
文章平均质量分 91
Flume是Cloudera提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。
@SmartSi
Stay Hungry, Stay Foolish
展开
-
Flume 实战:常用 Source 之 Exec Source
Exec Source 在启动时运行用户配置的 Unix 命令,并且期望在基于命令的标准输出上连续生成事件。它还可以从命令中输出错误流,将数据转换为 Flume 的事件,并将它们写入 Channel。原创 2024-09-16 22:41:16 · 716 阅读 · 0 评论 -
Flume 在有赞大数据的实践
Flume 是一个分布式的高可靠,可扩展的数据采集服务。转载 2024-09-16 18:55:58 · 186 阅读 · 0 评论 -
Flume 实战:安装与启动
在这我们只配置一个 Agent,Source 使用的是 NetCat TCP Source,简单说就是监听本机上某个端口上接收到的 TCP 协议的消息。原创 2024-09-16 08:32:08 · 920 阅读 · 0 评论 -
Flume 入门指南
Apache Flume 是一个分布式、可靠和高可用的系统,可以从大量不同的数据源有效地收集、聚合和移动日志数据,从而集中式的存储数据。Flume 被设计成为一个灵活的分布式系统,可以很容易扩展,而且是高度的可定制化。原创 2024-09-15 09:23:26 · 809 阅读 · 0 评论 -
[Flume]安装,部署与应用案例
1. 官网 http://flume.apache.org/2. 下载http://flume.apache.org/download.html3. 安装3.1 将下载的flume包,解压到/opt目录中3.2 创建flume-env.sh 配置文件xiaosi@Qunar:/opt/apache-flume-1.6.0-bin/c原创 2016-09-19 14:25:39 · 3243 阅读 · 1 评论