Hibench 7.1 mvn 编译时 mahout 报错

最新推荐文章于 2024-05-09 09:52:31 发布
最新推荐文章于 2024-05-09 09:52:31 发布
阅读量512 收藏 2
点赞数 1
分类专栏： hibench mvn mahout 文章标签： maven hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zw17302560727/article/details/114973739
版权

Hibench 7.1 mvn 编译时 mahout 报错

##mvn clean package 时有关mahou的错误截图：在这里插入图片描述

解决方式参考Hibench的github的issues中的回答

在hibench目录下执行

cp hadoopbench/mahout/pom.xml hadoopbench/mahout/pom.xml.bak
cat hadoopbench/mahout/pom.xml \
    | sed 's|<repo2>http://archive.cloudera.com</repo2>|<repo2>https://archive.apache.org</repo2>|' \
    | sed 's|cdh5/cdh/5/mahout-0.9-cdh5.1.0.tar.gz|dist/mahout/0.9/mahout-distribution-0.9.tar.gz|' \
    |
最低0.47元/天 解锁文章
zwlyn
关注
专栏目录
Linux环境下mvn 编译报错
狂野鬼步的博客
08-03 621
[ERROR] Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.5.1:compile (default-compile) on project rocketmq-logging: Compilation failure [ERROR] No compiler is provided in this environment. Perhaps you are running on a JRE rather than
hibench安装可能出现的错误
weixin_42547302的博客
05-31 452
Found binding in [jar:file:/home/wk/sd_spark/spark/spark-bodropout-test/spark/jars/slf4j-log4j12-1.7.16.jar!/org/slf4j/impl/StaticLoggerBinder.class] SLF4J: Found binding in [jar:file:/home/wk/sd_hadoop/spark/spark-bodropout-test/hadoop/share/hadoop/common
Hibench版本可能导致运行不成功
阿达King哥的博客
05-14 555
这里写自定义目录标题Hibench版本可能导致运行不成功前言问题原因解决方案 Hibench版本可能导致运行不成功 前言 下面列出我所用的Hibench，Hadoop，Spark的版本以及不成功的课题 名称 版本 Hibench bf390d2e6 Hadoop 3.1.0 Spark 3.0.0 出问题的课题 Sql/ 问题原因 Hibench在做课题的时候，只按照Hadoop和Spark的文档要求在pom.xml里面加入引用，至于是否真的可以，它不管。 对于sql类课题，可以
mahout报错classNotFound----jar包问题
Hello,Sparrow!
04-14 243
只要用maven添加mahout-core和mahout-integration就行了，其他的包会自动依赖添加进去的。就这错，整整一天多的时间，结果发现是jar包版本的问题，妈的，只用maven就好了嘛，省的自个麻烦。 ...
mahout 安装编译
weixin_34245169的博客
11-12 142
环境apache-maven-3.0.5-bin.tar hadoop-1.1.2-bin.tar mahout-distribution-0.7-src.tar mahout 需要编译 hadoop就不说了 然后环境变量需要设置的这几个 然后就是进入mahout 目录进行编译 mvn install -Dmaven.tes...
大数据基准测试工具HiBench部署与测试
Faith_xzc
03-17 5344
本文介绍了大数据基准测试工具HiBench的部署，并进行了测试。欢迎大家交流讨论！
Maven 配置环境报错：mvn help:system BUILD FAILURE
angelia_pm的博客
02-12 1821
小白报错->解决记录篇1 折腾了一个上午，，查看博客里大家的分享里显示应该是镜像问题，但是我更着改了换了三四个镜像地址，用阿里云官方maven配置仍旧报错。。。mvn help:system BUILD FAILURE 看到一篇博客下面的有人回复说换了镜像地址如果还错，那就卸载maven重新配置安装，还有人说应该是多个jdk的问题。。。嗯，多个jdk。。小白本人就是 先看结果：build success JDK版本17.0.2 官网下载Java Downloads | Oracle mi
mvn如何编译源码命令_创建Maven项目（cmd命令）
weixin_42151599的博客
01-17 2488
Maven 项目同 MyEclipse 或其他工具产生的项目一样，有自己的目录结构和特殊的意义。比如一般有如下目录。src\main\java，用来存放项目的 Java 源代码。src\main\resources，用来存放项目相关的资源文件(比如配置文件)。src\test\java，用来存放项目的测试 Java 源代码。src\test\resource，用来存放运行测试代码时所依赖的资源文件...
[maven报错]mvn clean install报错BUILD FAILURE
weixin_42178149的博客
08-01 4947
解决办法应该进入管理员终端，再进行指令输入。尝试输入mvn-version，看是否成功。若成功，可以尝试输入mvncleaninstall指令。若未成功，检查maven的path（系统环境变量中）是否正确（即检验maven是否配置成功）。注如何找到pom.xml文件本地路径-->右键文件选择showin-->Terminal（网上有些答案是openin-->Explorer，但是我找不到）解决办法找到pom.xml文件路径，cd进文件夹再输入指令即可。1.没有用管理员身份。...
mahout-0.9-cdh5.5.0.tar.gz
03-07
mahout-0.9-cdh5.5.0.tar.gz
mahout-core-0.9.jar+mahout-core-0.8.jar+mahout-core-0.1.jar
03-20
mahout-core-0.9.jar+mahout-core-0.8.jar+mahout-core-0.1.jar
压力测试工具_大数据测试 | 大数据压力测试工具HiBench
weixin_39628405的博客
12-06 490
需求描述：需要测试cdh集群的组件的性能和稳定性。压力测试工具选型：HiBenchHiBench测试工具说明：HiBench是一套基准测试套件，用于帮助我们评估不同的大数据框架性能指标(包括处理速度、吞吐等)的负载指标，可以评估Hadoop、Spark和流式负载等HiBench内置了若干主要的大数据计算程序作为基准测试的负载(workload)。Sort，对数据进行排序大数据程序。WordCoun...
采用Hibench进行大数据平台（CDH）基准性能测试
热门推荐
风筝中有风
03-07 1万+
参考博客地址：http://blog.csdn.net/wenwenxiong/article/details/77628670                        http://www.cnblogs.com/hellowcf/p/6912746.html最近的项目要给客户部署一套大数据平台（CDH），因此要出一个关于平台本身的性能测试。对测试流程不太了解，相比于项目功能测试，这种平台...
【1】搭建HA高可用hadoop-2.3（规划+环境准备）
weixin_33709219的博客
06-14 103
【1】搭建HA高可用hadoop-2.3（规划+环境准备）【2】搭建HA高可用hadoop-2.3（安装zookeeper） 【3】搭建HA高可用hadoop-2.3（部署配置hadoop--cdh5.1.0）【4】搭建HA高可用hadoop-2.3（部署配置HBase）搭建HA高可用hadoop-2.3前言： 作为安装Hadoop的第一步，就是根据实际情况...
Hibench 中sparkbench 安装及使用
CIYU01的博客
03-15 1647
概述： Hibench 是 Intel 开源的大数据基准测试工具，可以评估不同大数据框架的速度，吞吐量和系统资源利用率。包括 Sort, WordCount, TeraSort, Sleep, SQL, PageRank, Nutch indexing, Bayes, Kmeans, NWeight 和 enhanced DFSIO等，还支持流任务的基准测试，例如 Spark Streaming...
Hadoop常用测试集HiBench配置指南
jbb_123的博客
12-17 4160
Hibench是一个大数据 benchmark 套件，用来测试各种大数据框架的速度，吞吐量，系统资源利用率。  它支持的框架有：hadoopbench、sparkbench、stormbench、flinkbench、gearpumpbench。 hibench作为一个测试hadoop的基准测试框架，提供了对于hive：（aggregation，scan，join），排序（sort，TeraSo...
探秘大数据基准测试：HiBench Suite
最新发布
gitblog_00058的博客
05-09 273
探秘大数据基准测试：HiBench Suite 项目地址:https://gitcode.com/Intel-bigdata/HiBench 一、项目简介 在大数据的世界里，性能优化和框架评估是关键任务之一。这就是HiBench Suite的作用所在。作为一个强大的大数据微基准套件，HiBench致力于提供针对Hadoop、Spark以及流处理框架的详尽性能测评。它的最新版本为7.1.1，涵盖了一...
Mahout-0.9安装与测试
baalhuo的博客
05-18 1115
mahout-0.9环境配置与算法运行测试
mvn package 打包时候 报错 不兼容的类型
09-07
当使用mvn package命令进行打包时，如果报错提示不兼容的类型，通常是由于以下几种情况导致的： 1. 依赖版本不匹配：可能是项目中引入的某些依赖的版本与其他的依赖或者项目本身的版本不兼容。这种情况下，可以通过查看报错信息中的依赖项，尝试升级或降级依赖的版本，让它们之间版本兼容。 2. 类型转换错误：代码中可能存在类型转换错误，例如将一个不兼容的数据类型赋值给一个变量，或者将一个对象转换成不兼容的类型等。这种情况下，需要检查代码中类型转换的地方，并确保类型转换正确。 3. 编译错误：可能是由于代码编写错误导致的，例如在代码中引用了不存在的变量、方法或类等。这时，需要仔细检查代码，修复编译错误。 4. 缺少依赖：可能是项目中缺少某些必要的依赖。在进行打包时，会检查项目的依赖是否完整，如果缺少依赖，则会报错。这时，需要检查项目的依赖配置文件（例如pom.xml），确保所有必需的依赖已正确配置。 综上所述，当mvn package打包时报错不兼容的类型，需要通过检查依赖版本、修复类型转换错误、解决编译错误和确认依赖完整性等方式，逐个排查错误，最终修复该问题。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值