CDH6.3.2集成Flink1.12.2

最新推荐文章于 2024-01-03 17:27:55 发布

小小小书屋

最新推荐文章于 2024-01-03 17:27:55 发布

阅读量1.9k

点赞数

分类专栏： flink 文章标签：大数据 flink

本文链接：https://blog.csdn.net/qq_39315954/article/details/121639155

版权

本文详细介绍了如何在CDH6.3.2环境下集成Flink1.12.2，包括编译flink-shaded、flink，将编译结果打包，并通过特定工具转换为CDH能识别的包，最后解决在集成过程中遇到的错误问题。

摘要由CSDN通过智能技术生成

编译flink-shaded
flink-shaded(用10.0版本，1.12对应的flink-shaded1.12版本没有flink-shaded-hadoop-2-uber-3.0.0-cdh6.3.2-10.0这个jar包)
git clone https://github.com/apache/flink-shaded.git
git checkout -b flinkshaded9 release-9.0
vim pom.xml

 <repositories>
            <!-- Cloudera -->
            <repository>
                <id>cloudera-releases</id>
                <url>https://repository.cloudera.com/artifactory/cloudera-repos</url>
                <releases>
                    <enabled>true</enabled>
                </releases>
                <snapshots>
                    <enabled>false</enabled>
                </snapshots>
            </repository>
            <!-- Hortonworks -->
            <repository>
                <id>HDPReleases</id>
                <name>HDP Releases</name>
                <url>https://repo.hortonworks.com/content/repositories/releases/</url>
                <snapshots><enabled>false</enabled>