关于flume在agent启动时的错误注意

最新推荐文章于 2022-07-10 22:02:16 发布
最新推荐文章于 2022-07-10 22:02:16 发布
阅读量1.2k 收藏 2
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43861118/article/details/103150219
版权

在这里插入图片描述
可能会出现这样的报错，上面说错误信息是：错误的节点 应用：在启动时遇到一个致命的错误 听上去很吓人，看下细节， Unrecongnized option：–conf 说明是启动时命令行出错了，导致出错的命令行是：flume-ng agent \ --conf conf \ --conf-file ./flume-netcat.conf \ --name a1 \ -Dflume.root.loggerINFO,console
其实正确的启动命令是：flume-ng agent --conf conf --name a1 --conf-file ./flume-netcat.conf -Dflume.root.loggerINFO,console

ysh尚
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
使用 flume-ng agent 命令加载 simple-hdfs-flume.conf 配置信息中，启动flume传输数据时报错。
qq_44949338的博客
04-24 1463
因为没有开日志，没有保存截图。所以呢大概的问题就是端口号的配置出错，master被拒绝连接。 用netstat命令去查询一下，大概的参数是以下几个： -a 或–all 显示所有连线中的Socket。 -A <网络类型>或–<网络类型> 列出该网络类型连线中的相关地址。 -c 或–continuous 持续列出网络状态。
flume启动报错
dengmanzhou3124的博客
06-25 1312
执行flume-ng agent -c conf -f conf/load_balancer_server.conf -n a1 -Dflume.root.logger=DEBUG,console ，报错： org.apache.flume.FlumeException: Failed to set up server socket at org.apache.flume.sou...
flume启动失败原因
流的博客
11-29 6557
输入： flume-ng agent -c /root/apps/apache-flume-1.6.0-bin/conf -f ./avro-hdfs.conf -n al -Dflume.root.logger=INFO,console 控制台打印 Info: Including Hive libraries found via () for Hive access + exec /root/...
启动flume报如下错误的解决办法
阿正的博客
09-08 3206
若启动flume时提示上述错误，则修改配置文件
flume java_opts,flume的agent在windows下往HDFS写入文件，启动失败
weixin_42365303的博客
03-13 157
官网下载的flume，在windows下编译成功，使用的启动脚start.bat脚本本如下：set FLUME_HOME=E:\apache-flume-1.6.0-binset JAVA_HOME=E:\progamming install files\Java\jdk1.8.0_45set JAVA="%JAVA_HOME%\bin\java.exe"set JAVA_OPTS=-Xmx102...
关于Flume的优化和高可用
01-20
文章目录Flume优化一、内存参数优化（减少GC）1）-xmx和-xms设置相同值，避免在 GC 后调整堆大小带来的压力。2）JVM heap（堆内存）设置4G或更高二、channel优化Flume如何保证数据安全（高可用）事务机制Flume解决...
Docker容器中运行flume及启动不输出运行日志问题
09-30
主要介绍了 Docker容器中运行flume及启动不输出运行日志问题及解决方法，需要的朋友参考下吧
【Flume】（三）Flume 事务、拓扑结构和Flume Agent 内部原理
01-07
文章目录一、Flume 事务二、Flume Agent 内部原理三、Flume 拓扑结构1、简单串联2、复制和多路复用3、负载均衡和故障转移4、聚合 一、Flume 事务 二、Flume Agent 内部原理 重要组件： 1）ChannelSelector Channel...
关于Flume学习视频的对照文档.docx
01-29
Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。
尚硅谷大数据技术之Flume
03-23
在从 Channel 批量删除数据之前，每个 Sink 用 Channel 启动一个事务。批量事件一旦成功写出到存储系统或下一个 Flume Agent，Sink 就利用 Channel 提交事务。事务一旦被提交，该 Channel 从自己的内部缓冲区删除...
Flume 启动不起来报日志错误
weixin_39507910的博客
07-22 3434
flume启动不起来，不报错，但没有日志提示； 报错如下 Info: Including Hive libraries found via () for Hive access + exec /home/hadoop/install/jdk-11/bin/java -Xmx20m -Dflume.root.logger=info,console -cp '/home/hadoop/install/flume-1.6.0-cdh5.14.2/myconf:/home/hadoop/install/flum.
flume-ng启动报错: java.lang.NoClassDefFoundError: org/apache/hadoop/conf/Configuration
liuwei0376的专栏
07-10 1754
java.lang.NoClassDefFoundError: org/apache/hadoop/conf/Configurationflume-ng 启动后错误如下: flume配置 flume数据ETL配置文件: 原因分析 启动flume的serve上没有安装hadoop, 没有配置hadoop的环境变量. 导致flume启动时无法查找到所需的hadoop依赖.export HADOOP_HOME=/home/hadoop/apps/hadoop-2.6.5 export PATH=PATH:PATH
flume 不报错但是不能正常使用
weixin_34329187的博客
12-07 801
flume-ng agent --conf ./conf/ --conf-file ./conf/test1.conf --name a1 -Dflume.root.logger=INFO,console 可以加上logger输出 看看会不会打印出错误 转载于:https://www.cnblogs.com/yaohaitao/p/6141715.html...
Flume中agent的启动命令
上等的猪头肉
05-13 7027
写好agent配置文件，配置文件名为flume-app.conf（指定source、channel和sink） 启动agent配置文件命令如下： bin/flume-ng agent -c /opt/module/flume/conf -f ~/work/flume-job/flume-app.conf -n ag1 -Dflume.root.logger=info,console 在flum...
Flume启动配置文件 & Flume监听端口
qq_36570086的博客
05-25 712
添加内容如下： # Name the components on this agent a1.sources = r1 a1.sinks = k1 a1.channels = c1 # Describe/configure the source a1.sources.r1.type = netcat a1.sources.r1.bind = localhost a1.sources.r1.port = 44444 # Describe the sink a1.sinks.k1.type = logge.
flume启动不了--启动问题不输出日志警告
热门推荐
搞数据
08-08 1万+
[root@yangcl bin]# flume-ng agent -n a1 -c conf -f ../conf/example.conf  -Dflume.root.logger=INFO,console Info: Including Hive libraries found via () for Hive access + exec /usr/java/jdk1.8.0_181/bin...
启动flume小问题
u012425960的博客
05-02 587
:WARN No appenders could be found for logger (org.apache.flume.node.PollingPropertiesFileConfigurationProvider). log4j:WARN Please initialize the log4j system properly. log4j:WARN See http://logging
flume启动问题
weixin_41481760的博客
02-12 1318
flume启动遇到卡在Staring Sink…阶段 具体启动代码 flume-ng agent \ --name exec-memory-logger \ --conf $FLUME_HOME/conf \ --conf-file /usr/local/doc/streaming_project.conf \ -Dflume.root.logger=INFO,console 其中–conf可...
WARN conf.FlumeConfiguration: Could not configure sink sink1 due to: No channel configured for sink...
weixin_34242331的博客
05-08 2043
1、错误如下所示，启动flume采集文件到hdfs案例的时候，出现如下所示的错误： 大概是说No channel configured for sink，所以应该是sink哪里配置出现了错误，百度了一下，然后检查了一下自己的配置: 1 18/04/24 08:31:02 WARN conf.FlumeConfiguration: Could not configure sink sin...
flume启动命令
最新发布
05-30
Flume的启动命令为： ``` $ flume-ng agent --conf-file /path/to/conf/file.conf --name agentName ``` 其中，`/path/to/conf/file.conf` 是 Flume 配置文件的路径，`agentName` 是 Flume agent 的名称。启动命令...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值