Flume
关注
分享
扫一扫
不是咸鱼的鱼
这个作者很懒，什么都没留下…
展开
-
Flume:（四）FLUME使用（监控一个文件数据新增，输出到控制台）
agent：exec scource + memory channel + logger sink# example.conf: A single-node Flume configuration# Name the components on this agenta1.sources = r1a1.sinks = k1a1.channels = c1# Descr...原创 2019-11-10 10:35:32 · 396 阅读 · 0 评论 -
Flume:（三）FLUME使用（监听端口输出信息到控制台）
打开官网，documentation目录下，user guidesetup中的例子拷贝出来修改FLUME使用主要是写配置文件：配置Source配置Channel配置Sink串联Source、Chanel、Sinka1:agent的名称r1：Source的名称c1：Channel的名称k1：Sink的名称# example.conf: A single-no...原创 2019-11-10 10:15:59 · 436 阅读 · 0 评论 -
Flume:（二）安装部署
前置条件：1、安装 JDK1.82、足够的内存、磁盘空间3、文件目录权限安装JDK下载、解压、配置环境变量vi ~/.bash_profile添加 export JAVA_HOME=(解压目录) export $PATH=$JAVA_HOME/bin:$PATHsource ~/.bash_profile测试：java ...原创 2019-11-10 09:18:43 · 81 阅读 · 0 评论 -
Flume:（一）架构及核心组件
agent 内包含source、channel、sink1、Source 收集2、Channel 聚集3、Sink 输出Web Service ===> Source===> Channel ===> Sink ===> HDFS...从web服务收集数据到flume，sink到HDFS、Hbase等目...原创 2019-11-10 08:55:25 · 153 阅读 · 0 评论