flume和jar包冲突解决方案

最新推荐文章于 2023-11-09 03:15:29 发布
最新推荐文章于 2023-11-09 03:15:29 发布
阅读量110 收藏 1
点赞数 1
文章标签： flume 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Khimur/article/details/133847441
版权

运行flume，出现报错提示。

​
2023-010-14 20:45:44,445 (SinkRunner-PollingRunner-DefaultSinkProcessor) [ERROR - org.apache.  flume.sink.hdfs.HDFSEventSink.process(HDFSEventSink.java:459)] process failed
​

这个错误是因为我们的flume包和hadoop的guava包出现冲突导致的。我们只需要将出现冲突的包替换即可。

将hadoop的guava包替换掉flume的低版本包就行.

包的位置在$HADOOP_HOME/share/hadoop/common/lib/里。

cp /opt/tage/hadoop/tage/hadoop-3.2.2/common/lib/guava-27.0-jre.jar /opt/tage/flume/lib/
 
rm -rf /opt/tage/flume/lib/guava-11.0.2.jar

然后运行，成功。问题解决

Khimur
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
flume报错：ERROR [SinkRunner-PollingRunner-DefaultSinkProcessor] (org.apache.flume.sink.hdfs.HDFSEventS
bella1213811111的博客
05-26 4971
flume传输文件到hdfs时报错： ERROR [SinkRunner-PollingRunner-DefaultSinkProcessor] (org.apache.flume.sink.hdfs.HDFSEventSink.process:459) - process failed java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/
Flume对接Spark Streaming的相关jar包
12-20
这个压缩包中包含的是Flume-1.6.0对接Spark-1.6.2下的Spark Streaming时需要用到的jar包，将这些jar包放置到flume安装目录下对应的lib中
flume启动由于guava-jar包冲突报错
xiexianyou666的博客
03-31 3303
启动flume遇到如下报错 (SinkRunner-PollingRunner-DefaultSinkProcessor) [ERROR - org.apache.flume.sink.hdfs.HDFSEventSink.process(HDFSEventSink.java:459)] process failed java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/Stri
Flume v1.9.0启动报错ERROR - org.apache.flume.sink.hdfs.HDFSEventSink.process(HDFSEventSink.java:459)
最新发布
qq_70085330的博客
11-09 339
Flume v1.9.0启动报错ERROR - org.apache.flume.sink.hdfs.HDFSEventSink.process(HDFSEventSink.java:459)
Flume-常见错误
迷路剑客个人博客
08-16 2582
Flume-常见错误 1 Closing file failed. Will retry again in 120 seconds. 1.1 报错现象和解决 详细报错信息如下： 09 Aug 2019 17:00:31,787 WARN [SinkRunner-PollingRunner-DefaultSinkProcessor] (org.apache.flume.sink.hdfs.Buck...
解决Flume执行命令常遇错误
2301_79567237的博客
10-15 538
一.解决Flume执行命令时遇到的ChannelException和InterruptedException异常2.问题原因:这个异常的出现通常是由于以下原因引起的：(1).系统资源（例如内存或CPU）不足，导致Flume执行过程中被迫中断。3.解决方法:针对上述问题，我们可以采取以下措施来解决Flume遇到的ChannelException和InterruptedException异常：(1).如果系统资源不足，可以考虑增加系统的内存或CPU。
ERROR - org.apache.flume.SinkRunner$PollingRunner.run(SinkRunner.java:158)] Unable to deliver event.
qq_43224174的博客
12-28 2622
flume启动一直报错ERROR - org.apache.flume.SinkRunner$PollingRunner.run(SinkRunner.java:158)] Unable to deliver event. Exception follows.，报错详情如下 2021-12-27 20:41:52,509 (SinkRunner-PollingRunner-DefaultSinkProcessor) [ERROR - org.apache.flume.SinkRunner$PollingRu
flume抓取oracle数据所需jar包
07-14
flume抓取oracle数据所需jar包
flume与kafka整合需要的jar包
04-21
如果你的flume中配置了向kafka中发送数据的sink，需要将这些jar包放到flume的lib目录下
_inc解决应急flume的jar包和传输配置文件
08-02
这是我的数仓项目，大家记得用时改改
Flume采集MySQL数据所需jar包.zip
10-21
Flume采集MySQL数据所需jar包，含flume-ng-sql-source-1.5.2.jar，mysql-connector-java.jar
记flume部署过程中遇到的问题以及解决方法（持续更新）
热门推荐
小麒麟的成长之路
08-21 4万+
项目需求是将线上服务器生成的日志信息实时导入kafka，采用agent和collector分层传输，app的数据通过thrift传给agent，agent通过avro sink将数据发给collector，collector将数据汇集后，发送给kafka，拓扑结构如下：现将调试过程中遇到的问题以及解决方法记录如下：1、 [ERROR - org.apache.thrift.server.Abstr...
flume-sink报错 : close() called when transaction is OPEN - you must either commit or rollback first
weixin_36815898的博客
05-13 939
启动flume agent时报错 (SinkRunner-PollingRunner-DefaultSinkProcessor) [ERROR - org.apache.flume.SinkRunner$PollingRunner.run(SinkRunner.java:158)] Unable to deliver event. Exception follows. java.lang.IllegalStateException: close() called when transaction is OP
Flume常见错误整理（持续更新ing...）
光于前裕于后的博客
08-12 2万+
进来看！
flume sink hdfs异常
linux_ja的专栏
08-26 9122
1、异常消息如下： 016-08-26 14:19:17,704 (hdfs-sink1-call-runner-2) [ERROR - org.apache.flume.sink.hdfs.AbstractHDFSWriter.hflushOrSync(AbstractHDFSWriter.java:267)] Error while trying to hflushOrSync! 2016-
如何下载flume elasticsearch插件的jar包
05-12
你可以通过以下步骤下载Flume Elasticsearch插件的JAR包： 1. 打开 https://mvnrepository.com/ 网站 2. 在搜索框中输入 "flume elasticsearch" 并点击搜索按钮 3. 在搜索结果列表中找到 "flume-ng-elasticsearch-...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值