Flume 启动卡住（netcat -＞ console)

最新推荐文章于 2024-11-29 12:05:50 发布
最新推荐文章于 2024-11-29 12:05:50 发布
阅读量357 收藏 2
点赞数 1
文章标签： flume 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lx104921/article/details/144037520
版权

source:netcat   sink: console  channel: memory

问题：在启动flume时卡在如图所示的地方。

解决方法：进入到配置文件conf目录下，编辑log4j2.xml，修改LogFile为Console即可，如果有绑定异常，可以重启虚拟机。

重新运行启动命令，成功绑定：

小刘鸭!
关注
Flume 启动不起来报日志错误
weixin_39507910的博客
07-22 3742
flume启动不起来，不报错，但没有日志提示； 报错如下 Info: Including Hive libraries found via () for Hive access + exec /home/hadoop/install/jdk-11/bin/java -Xmx20m -Dflume.root.logger=info,console -cp '/home/hadoop/install/flume-1.6.0-cdh5.14.2/myconf:/home/hadoop/install/flum.
Flume 学习笔记（一）使用Flume收集netcat端口通信的信息到本地文件
希望每天都能进步一点点
03-19 1562
若发现文章有误，敬请指教，感谢 文章目录运行环境一、准备 netcat 工具二、认识 Flume2.1 Flume 概念2.1 Flume 架构三、使用 Flume 收集端口的信息3.1 开启netcat3.2 创建配置文件3.3 启动flume 运行环境 Vmware 15 Flume1.9 CentOS7 操作系统 一、准备 netcat 工具 参考资料 Netcat 是一款简单的Unix工具，使用UDP和TCP协议。 它是一个可靠的容易被其他程序所启用的后台操作工具，同时它也被用作网络的.
flume启动问题
weixin_41481760的博客
02-12 1510
flume启动遇到卡在Staring Sink…阶段 具体启动代码 flume-ng agent \ --name exec-memory-logger \ --conf $FLUME_HOME/conf \ --conf-file /usr/local/doc/streaming_project.conf \ -Dflume.root.logger=INFO,console 其中–conf可...
flume启动后一直卡在这个位置，没有报错信息
最新发布
qq_37048497的博客
11-29 131
flume启动后一直卡在这个位置，没有报错信息。
Linux下以exec方式启动Flume，启动日志卡在Starting Sink的解决方法
弗兰-随风小欢的博客
09-11 3378
Linux启动Flume时，卡在了如下图所示的地方： 打开百度搜索相关问题，奈何这方面的问题解决办法基本没有，在楼主仔细的观察下解决了此问题，现在分享给大家： 我们一定要看日志，仔细去看控制台的日志，假如启动有问题的话，那么日志信息肯定会显示出来，楼主仔细发现了有WARN的语句如下： 由此句，可以判断出gent是无效的，我们由此定位到启动的配置文件，这里首先给出我启动Flume...
linux exec服务卡,Linux下以exec方式启动Flume，启动日志卡在Starting Sink的解决方法...
weixin_32325225的博客
05-07 310
Linux启动Flume时，卡在了如下图所示的地方： 打开百度搜索相关问题，奈何这方面的问题解决办法基本没有，在楼主仔细的观察下解决了此问题，现在分享给大家：我们一定要看日志，仔细去看控制台的日志，假如启动有问题的话，那么日志信息肯定会显示出来，楼主仔细发现了有WARN的语句如下： 由此句，可以判断出gent是无效的，我们由此定位到启动的配置文件，这里首先给出我启动Flume的命令：flume-n...
记一次 Hadoop、Hbase集群中Flume 启动报错 找不到或无法加载主类 org.apache.flume.tools.GetJavaProperty
一花一世界
01-04 1634
报错内容 错误：找不到或无法加载主类 org.apache.flume.tools.GetJavaProperty 如下图： 集群背景 1、Hadoop 3.3.0 HDFS基础环境（非高可用集群） https://blog.csdn.net/llwy1428/article/details/111144524 2、安装部署 Zookeeper 3.6.2 集群 https://blog.csdn.net/llwy1428/article/details/111601567 3、基于 Hadoop3.3.
flume 启动
cqy646的专栏
05-08 2243
flume-ng.cmd agent -conf-file ..\conf\flume.conf  -name a1  -property flume.root.logger=INFO,console
flume服务搭建
qq_74922407的博客
08-13 708
监听一个指定的网络端口，即只要应用程序向这个端口里面写数据，这个。监听一个指定的命令，获取一条命令的结果作为它的数据源。的数据单元发送，可以在原先的第一个窗口查看。若出现版本号则代表flume部署成功。此时输入任何字符，都会以。组件就可以获取到信息。
01-flume快速上手
clear-ninghongkang的博客
06-23 2127
一小时快速学会使用flume
Flume使用详解（三）
01-07
在Flume使用中配置相当重要，但也非常简单。 在conf目录下，创建一个配置文件，比如：template.conf（名字可以不固定,后缀也可以不固定） 相关配置： #配置Agent a1 的组件 a1.sources=r1 a1.channels=c1 (可以配置多个，以空格隔开，名字自己定） a1.sinks=s1 (可以配置多个，以空格隔开，名字自己定） #描述/配置a1的r1 a1.sources.r1.type=netcat (netcat表示通过指定端口来访问) a1.sources.r1.bind=0.0.0.0 (表示本机) a1.sources.r1.port=444
Flume基础【概述、安装、入门案例】
weixin_43923463的博客
04-07 1879
一 Flume概述 1 Flume定义 Flume 是一种分布式、可靠且可用的服务，用于高效收集、聚合和移动大量日志数据。 它具有基于流数据流的简单灵活的架构。 它具有可调整的可靠性机制以及许多故障转移和恢复机制，具有健壮性和容错性。 它使用允许在线分析应用程序的简单可扩展数据模型。 分布式的日志采集、聚合和传输的系统，基于流式架构。 Flume最主要的作用是实时读取服务器本地磁盘的数据，将数据写入到HDFS。 2 Flume基础架构 Agent Agent是一个JVM进程，它以事件的形式将数据从源
Flume学习（三）Flume的配置方式
potter
05-07 2742
1、单一代理流配置1.1　官网介绍http://flume.apache.org/FlumeUserGuide.html#avro-source通过一个通道将来源和接收器链接。需要列出源，接收器和通道，为给定的代理，然后指向源和接收器及通道。一个源的实例可以指定多个通道，但只能指定一个接收器实例。格式如下：实例解析：一个代理名为agent_foo，外部通过avro客户端，并且发送数据通过内存通道给...
Flume启动报错，说系统找不到指定文件
weixin_64542139的博客
03-27 1960
Flume 日志文件路径不正确：如果在 Flume 启动时指定了日志文件路径，但该路径不正确，你将会看到这个错误。请检查日志文件路径是否正确，并确保在启动 Flume 时指定了正确的日志文件路径。Flume 配置文件路径不正确：请检查你的 Flume 配置文件路径是否正确，并确保在启动 Flume 时指定了正确的配置文件路径。缺少必要的库文件：如果你的系统缺少必要的库文件，Flume 启动时也可能会报错。请检查你的系统是否安装了所有必要的库文件，并确保它们已正确配置。
FLUME启动遇到的坑
m0_58149226的博客
03-11 4984
首先我的环境 hadoop版本: 3.1.x版本 flume版本: 1.9.0 安装启动配置source,channel,sink 启动flume 消费kafkaTopic中的数据,将数据上传到hdfs报错:如下 出现该问题有可能是三种情况: 一、环境变量未配置 在安装了flume的所有机器上，首先都需要配置hadoop环境变量 配置环境变量即可 二、flume安装目录中lib文件夹下的guava-11.0.2.jar的版本不兼容 hadoop3.0.x上hadoop/sha..
flume启动不了--启动问题不输出日志警告
热门推荐
搞数据
08-08 1万+
[root@yangcl bin]# flume-ng agent -n a1 -c conf -f ../conf/example.conf  -Dflume.root.logger=INFO,console Info: Including Hive libraries found via () for Hive access + exec /usr/java/jdk1.8.0_181/bin...
解决启动flume时,出现问题警告和报错的问题 No configuration directory set
qq_44513460的博客
12-18 8508
解决flume在启动时,出现的警告和报错问题
log文件--》Flume--》HDFS--》Hive(ODS)-->DWD-->DWS-->ADS-->上层应用
06-19
Flume是一个分布式、可靠的数据收集系统，用于收集这些日志文件，并将它们传输到其他数据存储系统。 当Flume接收到日志后，它会将这些数据发送到Hadoop Distributed File System (HDFS)，HDFS是一个高度可扩展的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值