flink 1.12本地编译报错解决--flink-fs-hadoop-shaded等

最新推荐文章于 2025-09-09 04:01:26 发布

原创

最新推荐文章于 2025-09-09 04:01:26 发布 · 2k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#flink #maven #bug

本文档详细记录了在编译Flink 1.12时遇到的flink-fs-hadoop-shaded jar包缺失问题。问题源于使用-Dmaven.test.skip=true导致的。解决方案是改用-DskipTests参数，它会编译测试用例但不执行，避免了找不到jar包的错误。若之后出现运行测试代码报错，可通过取消maven profile中java11的勾选并重新编译来解决。

flink 1.12本地编译报错解决

问题描述：
原因分析：
解决方案：
解决方案：

问题描述：

找不到jar包 Failure to find org.apache.flink:flink-fs-hadoop-shaded:jar:tests:1.11-byted-SNAPSHOT in https://maven.byted.org/repository/public was cached in the local repository, resolution will not be reattempted until the update interval of bytedance-mirror has elapsed or updates are forced

Failure to find org.apache.flink:flink-fs-hadoop-shaded:jar:tests:1.11-byted-SNAPSHOT in https:

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

iwonder123

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

flink 1.14编译：flink-fs-hadoop-shaded找不到

q977734161的专栏

06-13

876

flink 1.14编译：flink-fs-hadoop-shaded找不到

解决问题：flink编译错误提示“flink-fs-hadoop-shaded“找不到

2301_79367634的博客

08-29

424

解决问题：flink编译错误提示"flink-fs-hadoop-shaded"找不到在进行Flink项目编译时，有时候会遇到一些依赖项无法找到的问题。其中一个常见的问题是编译错误提示"flink-fs-hadoop-shaded"找不到。本文将介绍如何解决这个问题。

1 条评论您还未登录，请先登录后发表或查看评论

Apache Hadoop Shaded Client使用指南：解决依赖冲突问题

热门推荐

九师兄

09-24

29万+

1. 编译 lcc@lcc flink$ mvn clean install -Dmaven.test.skip=true -Dhadoop.version=2.8.3 -Dmaven.javadoc.skip=true -Dcheckstyle.skip=true 报错 [INFO] -----------------------------------------------------...

编译flink1.9.0 报flink-fs-hadoop-shaded找不到

Leeyehong_self的专栏

02-22

4205

编译flink1.9.0 报flink-fs-hadoop-shaded找不到 1.Flink 源码下载 git clone git@github.com:apache/flink.git 然后你可以切换到项目的不同分支，执行下面命令将代码切换到 release-1.9 分支： git checkout release-1.9 2.Flink 源码编译 mvn clean install -D...

flink-shaded-hadoop-2-uber-2.7.5-10.0.jar.zip

05-27

总的来说，`flink-shaded-hadoop-2-uber-2.7.5-10.0.jar.zip` 提供了一个方便、兼容且冲突解决的 Flink-Hadoop 集成方案，是大数据开发者在处理涉及 Flink 和 Hadoop 的复杂场景时的重要工具。理解并熟练使用这种 ...

flink-shaded-hadoop-uber-3.2.3.jar

05-29

flink 1.14.3集成hadoop 3.2.3的jar包，flink启动yarn session时需要将该jar放到flink的lib目录下

flink-shaded-hadoop-3-uber-3.1.1.7.1.1.0-565-9.0.jar.tar.gz

11-14

为解决这个问题，Flink社区提供了"flink-shaded-hadoop-3-uber-3.1.1.7.1.1.0-5.6.5-9.0.jar"这样的兼容包，这是一个"uber jar"，也称为fat jar，它包含了Flink对Hadoop 3.x的依赖，并进行了重打包处理，以避免类...

flink-shaded-hadoop-3下载

05-19

flink-shaded-hadoop-3下载

Flink 1.8.0编译:flink-fs-hadoop-shaded找不到

九师兄

09-24

4748

1.编译报错 [INFO] force-shading ...................................... SUCCESS [ 5.703 s] [INFO] flink 1.8-SNAPSHOT ................................. SUCCESS [ 21.865 s] [INFO] flink-annotations ...........

azure-common-1.6.1-incubating-tests.jar

07-18

标签:azure-common-1.6.1-incubating-tests.jar,azure,common,1.6.1,incubating,tests,jar包下载,依赖包

Flink整合CDH Hadoop编译&简单测试

qq_32667911的博客

05-28

616

准备工作 maven3 jdk1.8 下载源码包 Flink官网: https://flink.apache.org/ 下载地址: Apache Flink 1.10.0 Source Release 配置支持CDH依赖 maven默认不支持cdh的依赖下载，修改maven目录下conf中的settings.xml如下：（这里的cloudera-releases是flink源码中配置的id） nexus-aliyun *,!cloudera-releases,!c

flink 1.8编译：flink-fs-hadoop-shaded找不到

九师兄

09-24

6750

flink 1.8编译：flink-fs-hadoop-shaded找不到

报错Failure to find org.apache或报错 The container 'Maven Dependencies' references non existing

qq_20240805的博客

05-02

4171

Maven 本地仓库明明有jar包（或nexus私库中明明有jar包），pom文件还是报错解决办法一般报错：“Failure to find org.apache.maven.plugins:maven-resources-plugin:jar:2.6 in http://localhost:8091/nexus/content/groups/public was cached in t...

分享图片或链接到抖音

sunming的博客

07-20

4212

分享图片或链接到抖音

Androidstudio无法下载报错unknow host"akamai.bintray.com".you may need to adjust the proxy settings in grad

陈德山

09-22

919

解决方法： buildscript { repositories { maven{ url 'http://maven.aliyun.com/nexus/content/groups/public/'} } } allprojects { repositories { maven{ url 'http://maven.aliyun.com

The requested profile “pom.xml“ could not be activated because it does not exist. 解决方法

asdfgh0077的博客

12-01

890

The requested profile "pom.xml" could not be activated because it does not exist. 解决方法

flink1.13+ 集成hadoop 遇到问题及解决方法

ReturnTmp的博客

08-11

3231

问题１：在 Flink 1.11.0 版本之后,增加了很多重要新特性,其中就包括增加了对 Hadoop3.0.0 以及更高版本 Hadoop 的支持,不再提供“flink-shaded-hadoop-*”jar 包,而是通过配置环境变量完成与 YARN 集群的对接。在将 Flink 任务部署至 YARN 集群之前,需要确认集群是否安装有 Hadoop,保证 Hadoop版本至少在 2.2 以上,并且集群中安装有 HDFS 服务。...