FlinkX 部署

最新推荐文章于 2024-07-24 11:58:44 发布

wuhulala

最新推荐文章于 2024-07-24 11:58:44 发布

阅读量3.9k

点赞数

分类专栏： FlinkX 原理剖析文章标签： linux 分布式 FLinkX

本文链接：https://blog.csdn.net/u013076044/article/details/106392437

版权

本文档详细介绍了FlinkX的部署过程，包括执行环境、运行模式、源码下载、安装依赖、打包以及如何启动数据同步任务。支持单机、standalone、yarn和yarnPer模式。同时提供了命令行参数选项的详细说明，例如model、job、pluginRoot等，以帮助用户根据不同场景配置和启动任务。

摘要由CSDN通过智能技术生成

FlinkX 部署

运行概述

执行环境

Java: JDK8及以上
Flink集群: 1.4及以上（单机模式不需要安装Flink集群）
操作系统：理论上不限，但是目前只编写了shell启动脚本，用户可以可以参考shell脚本编写适合特定操作系统的启动脚本。

运行模式

单机模式：对应Flink集群的单机模式
standalone模式：对应Flink集群的分布式模式
yarn模式：对应Flink集群的yarn模式
yarnPer模式: 对应Flink集群的Per-job模式

源码下载

git clone https://github.com/DTStack/flinkx.git

安装依赖

call mvn install:install-file -DgroupId=com.ibm.db2 -DartifactId=db2jcc -Dversion=3.72.44 -Dpackaging=jar -Dfile=../jars/db2jcc-3.72.44.jar

call mvn install:install-file -DgroupId=com.github.noraui -DartifactId=ojdbc8 -Dversion=12.2.0.1 -Dpackaging=jar -Dfile=../jars/ojdbc8-12.2.0.1.jar

call mvn install:install-file -DgroupId=