flume
阳光里哭泣的狗
把自己当成普通人,稍微有点成就,就是上天的眷顾
展开
-
Flume学习(三)Flume的多路复用
目录多路复用概述准备工作标题多路复用概述准备工作标题原创 2020-12-21 11:28:06 · 4904 阅读 · 1 评论 -
Flume学习(二)Flume读取本地/目录文件至HDFS
目录拷贝相关Hadoop 包到 Flume lib 目录读取本地文件至HDFS创建flume-file-hdfs.conf文件执行监控开启Hadoop集群执行监控配置测试拷贝相关Hadoop 包到 Flume lib 目录jar包所在的路径在Hadoop文件夹下的share/hadoop中该文件夹下中的common和hdfs中存在jar包在hdfs文件夹下lib中将以下的jar包放至flume文件夹下的lib下commons-configuration 2-2.1.1.jarha原创 2020-12-17 11:09:21 · 4564 阅读 · 0 评论 -
Flume学习(一)Flume安装与监视端口操作
目录Flume安装Flume下载安装配置监视端口安装netcat工具安装telnet工具判断端口是否被占用创建Flume Agent配置文件开启flume监听端口!!!发送内容之前一定要开启监听,再发送内容使用telnet工具向端口发送内容或使用netcat工具向端口发送内容Flume安装Flume下载下载地址安装配置将下载好的压缩包上传至虚拟机中解压flume压缩包[root@master hadoop]# tar -xzvf apache-flume-1.9.0-bin.tar.gz原创 2020-12-03 22:14:30 · 5198 阅读 · 1 评论 -
Flume学习(四)Flume 负载均衡和故障转移
目录准备工作分配flume文件夹分配环境变量并刷新配置实现步骤创建group文件夹创建flume-netcat-flume.conf创建flume-flume-console1.conf创建flume-flume-console2.conf启动测试均衡测试准备工作分配flume文件夹将flume文件夹分别传输给slave1和slave2[root@master hadoop]# scp -r flume/ root@slave1:/usr/hadoop/[root@master hadoop]#原创 2020-12-20 15:17:14 · 3913 阅读 · 0 评论