flume1.9.0错误: 找不到或无法加载主类 org.apache.flume.tools.GetJavaProperty

最新推荐文章于 2024-07-07 16:16:20 发布
最新推荐文章于 2024-07-07 16:16:20 发布
阅读量309 收藏
点赞数 7
文章标签： apache flume 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_63026254/article/details/139902196
版权

 在flume-ng中添加绿色部分

# determine HBASE java.library.path and use that for flume
    local HBASE_CLASSPATH=""
    local HBASE_JAVA_LIBRARY_PATH=$(HBASE_CLASSPATH="$FLUME_CLASSPATH" \
        ${HBASE_IN_PATH} org.apache.flume.tools.GetJavaProperty \
        java.library.path 2>/dev/null | grep hbase)

报错前：

修改后：

ฅ忘ฅ
关注
  • 7
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
apache-flume-1.9.0-bin.tar.gz
07-28
标题 "apache-flume-1.9.0-bin.tar.gz" 暗示这是 Apache Flume 的 1.9.0 版本的二进制分发包，以 tar.gz 格式压缩。这个版本的 Flume 已经预先编译完成，用户下载后可以直接进行安装和使用，无需自行编译源代码。 ...
Flume1.9.0配置.docx
09-14
Flume 是一个分布式、可靠、可扩展的日志聚合系统，可以从各种数据源中收集数据，并将其传输到目标系统中，本文将对 Flume 1.9.0 的配置进行详细的介绍。 一、Flume 的安装和环境配置 在安装 Flume 之前，需要安装...
flume部署安装
sxj的专栏
03-06 413
flume其实就是通过配置文件来实现不同的功能 1、安装配置： （1）首先从https://archive.apache.org/dist/flume/下载需要的版本，如下图所示： （2）使用tar -xzvf apache-flume-1.9.0-bin.tar.gz解压，如下图所示： （3）配置环境变量，将以下信息加入到/etc/profile文件中，如： export FLUME_HOME=/usr/local/src/apache-flume-1.9.0-bin export P
Flume报错解决方法：找不到命令 flume-ng，但它确实存在于当前位置。默认情况下，Windows PowerShell 不会从当前 位置加载命令。（系统找不到指定路径）
weixin_65194071的博客
04-15 933
https://www.ctyun.cn/zhishi/p-261316方法二： 解决方法：找到目录下的文件C:clapache-flume-1.9.0-bin\bin\flume-ng.ps1，删除其339-405行的代码，重新执行命令即可。方法三：配置自己jdk的环境变量参考如下：（1）添加（2）在系统变量中path添加还可添加Flume的环境变量总结：我可以成功采取了三个办法结合（之前一个一个都没试出来）在cmd下，运行 flume-ng version 终于成功了！！！有想法，有帮助的，有效的请动动
记一次 Hadoop、Hbase集群中Flume 启动报错 找不到或无法加载主类 org.apache.flume.tools.GetJavaProperty
一花一世界
01-04 1496
报错内容 错误：找不到或无法加载主类 org.apache.flume.tools.GetJavaProperty 如下图： 集群背景 1、Hadoop 3.3.0 HDFS基础环境（非高可用集群） https://blog.csdn.net/llwy1428/article/details/111144524 2、安装部署 Zookeeper 3.6.2 集群 https://blog.csdn.net/llwy1428/article/details/111601567 3、基于 Hadoop3.3.
hadoop之flume安装错误org.apache.flume.tools.GetJavaProperty Flume 1.9.0
David_house的博客
12-06 1322
hadoop之flume 安装好flume之后，输入flume-ng version，出现以下错误： 错误: 找不到或无法加载主类 org.apache.flume.tools.GetJavaProperty Flume 1.9.0 如图所示： 解决方法： 将hbase的conf目录下hbase-env.sh的export HBASE_CLASSPATH=***注释掉。 再执行一次就成功了。...
解决启动flume时,出现问题警告和报错的问题 No configuration directory set
qq_44513460的博客
12-18 7856
解决flume在启动时,出现的警告和报错问题
记一次 Centos7.x Hadoop3.x 集群安装部署 Flume v1.9.0
一花一世界
01-26 847
基本信息 官网http://flume.apache.org/ （1）：Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。 （2）：Flume可以采集文件，socket数据包等各种形式源数据，又可以将采集到的数据输出到HDFS、hbase、hive、kafka等众多外部存储系统中 （3）：一般的采集需求，通过对flume的简单配置即可实现 （4）：Flume针对特殊场景也具备良好的自定义扩展能力，因此，flume可以适用于大部分的日常数据采集场景 Flume是一个分布式、可靠、高可用
CDH版本Flume报错：java.lang.NoSuchMethodError
joshua
04-19 631
问题： 用Flume同步mysql数据到kafka的时候，会导入一个flume-ng-sql-souce.jar的插件。但开源社区的插件是apache flume版本的，与CDH版本的不兼容，会报如下错误： java.lang.NoSuchMethodError 20/4/16 15:40:23 ERROR node.PollingPropertiesFileConfigurationP...
大数据学习初级入门教程（十四） —— Flume 1.9.x 单节点的安装、配置、启动和测试
码园平常事
10-05 627
本篇主要简单介绍下 Flume 的安装、配置、启动和测试。Flume 是一种分布式的、可靠的且可用的服务，可以高效地收集、聚合和移动大量日志数据。它具有基于流数据流的简单灵活的体系结构。它具有健壮性和容错性，具有可调的可靠性机制和许多故障转移和恢复机制。它使用一个简单的可扩展数据模型，允许在线分析应用。
关于Flume报错问题集
liuli031874的博客
10-14 676
而hdfs 是基于hive ，hive里面的jar包用的版本与flume lib下的jar包版本相差太大，导致无法正常运行。经过测试，是guava-27.0-jre.jar包版本太高，所以我们先删除flume lib下低版本的guava-xxx-jre.jar，将hive lib高版本的guava-27.0-jre.jar它拷贝到flume的lib下即可。重启flume即可。
apache-flume-1.9.0-bin.tar.zip
10-07
6. **扩展性**：Apache Flume允许通过插件机制添加新的数据源、通道和接收器，增强了其适应不同场景的能力。1.9.0版本可能包含了新的插件或者对现有插件的优化。 7. **性能优化**：在1.9.0版本中，Flume可能进行了...
【SpringBoot】Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster
01-07
【SpringBoot】Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster报错明细问题解决后记 报错明细 IDEA SpringBoot集成hadoop运行环境，，本地启动项目，GET请求接口触发...
flume-1.9.0.tgz
10-24
Flume 是 Apache 开源项目中的一个分布式、可靠且可用于有效收集、聚合和移动大量日志数据的工具。在大数据处理领域，Flume 是一个至关重要的组件，尤其在日志管理和实时数据分析中扮演着核心角色。"flume-1.9.0.tgz...
httpd目录显示乱码问题
最新发布
Jason的博客
07-07 184
【代码】httpd目录显示乱码问题。
Apache Seata tcc 模块源码分析
IT云清
07-06 405
Apache Seata tcc 模块源码分析
Apache Seata模块源码分析
IT云清
07-06 595
Seata config 模块源码分析
错误: 找不到或无法加载主类 org.apache.flume.tools.getjavaproperty
06-28
### 回答1： 这个错误提示是因为在运行程序时，无法找到或加载org.apache.flume.tools.getjavaproperty这个主类。可能是因为该类不存在或者没有正确配置类路径。需要检查程序中是否正确引用了该类，并且确保类路径正确配置。 ### 回答2： 这个错误通常在使用Apache Flume中的getjavaproperty命令时发生，并且通常是由于缺少必要的依赖项或JAR文件引起的。 要解决这个问题，可以考虑以下几点： 1. 检查是否正确设置了Flume的环境变量。首先，确保已经正确安装了Flume，并且将其添加到了系统的PATH和FLUME_HOME变量中。可以通过在命令行中输入“flume version”来测试Flume是否已正确设置。 2. 检查是否缺少必要的JAR文件。在使用getjavaproperty命令时，需要确保已经安装了所有必要的库文件。可以通过检查Flume的lib目录是否包含所有必要的JAR文件来验证这一点。在Flume的lib文件夹下，可以找到flume-ng-sdk-X.X.X.jar和flume-ng-core-X.X.X.jar两个包，确保这两个包已经存在，并且名称正确。 3. 检查Flume的配置文件是否正确。如果Flume的配置文件中没有正确地配置getjavaproperty插件，则可能会导致该错误。建议检查配置文件是否正确设置了getjavaproperty的参数，如class和property等。 4. 检查Java的版本和设置是否正确。getjavaproperty插件需要Java 1.7或更高版本才能正常运行。可以通过在命令行中输入“java -version”来测试Java版本是否符合要求，如果版本过低，则需要更新Java版本。 总之，错误"找不到或无法加载主类org.apache.flume.tools.getjavaproperty"通常是由于环境变量设置或缺少必要的库文件导致的。遵循上述提示，检查Flume的环境配置、库文件配置和Java版本，以确保getjavaproperty插件可以正确运行。 ### 回答3： 这个错误一般是由于Flume配置文件中，使用了一个名为getjavaproperty的interceptor，但是这个interceptor没有正确配置或没有正确安装依赖的原因所引起。在Flume中，interceptor是一个数据来源或接收端与channel之间的过渡组件，它可以处理从源或接收端发送到channel的事件，通常是对这些事件进行预处理和/或转换，提取其中一些属性等等。getjavaproperty是其中一个interceptor，它可以提取Java属性（通过JavaBean属性命名约定）并将其插入到事件标头中。当Flume在尝试运行这个interceptor时，如果出现找不到或无法加载主类org.apache.flume.tools.getjavaproperty的错误信息，则表示这个interceptor没有能够正确安装或配置依赖。解决这个问题，可以尝试以下几个方案： 1. 检查interceptor的配置: 确认interceptor配置正确，包括interceptor的类名、属性配置、依赖等都正确无误。可以参考官方文档或权威书籍，或者参考其他Flume项目的interceptor配置进行参考。 2. 检查Flume环境配置: 确认Flume环境正确安装并配置了所需的依赖，例如JDK、Flume NG Client Libraries、flume-ng-configuration等必要的依赖。需要注意，Flume的版本和所使用的依赖版本也会影响interceptor的使用和配置。 3. 检查JavaBean属性命名约定：getjavaproperty interceptor是通过JavaBean属性命名约定来提取Java属性的。因此需要确认JavaBean属性名称是否正确，包括不同属性之间是否遵循JavaBean属性的命名约定。 4. 确认路径和权限问题：确认Flume安装目录和依赖jar包或lib所在目录是否正确配置，并具有读取和执行的权限。如果权限不足，可以使用chmod命令修改文件权限。 5. 检查日志文件：如果以上所有步骤都已确认无误，可以检查Flume的日志文件，以获得更多的调试信息和指导。错误日志常常会提供有关最初导致错误的更详细信息，例如缺少哪些配置文件或jar包，或是因为java版本不兼容而导致的错误等等。 在认真核查了上述内容以后，如果还无法解决这个错误，则建议在Flume社区寻求帮助。可以在Flume的官方网站上找到相关文档和资源，也可以加入到Flume的社区讨论组中去寻求帮助和交流。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值