apache dophinscheduler 3.1.0 编译

源码编译

从github下载apache dophinscheduler 3.1.0的源码,解压

编译

mvn clean install -Prelease

跳过测试、注释、格式检查, IntelliJ IDEA 编译需加单引号 windows下命令行输入

mvn clean install -Prelease -Dmaven.test.skip=true -Dcheckstyle.skip=true -Dmaven.javadoc.skip=true

编译报错
编译报错可能是镜像的问题,解决方案,修改pom文件 D:\github\dolphinscheduler-3.1.0\pom.xml
找到spotlesss-maven-plugin插件,然后注释掉, 重新编译源码。

mvn clean package -Prelease -Dmaven.test.skip=true -Dcheckstyle.skip=true -Dmaven.javadoc.skip=true

生成tar包所在路径如下所示:

dolphinscheduler-3.1.0/dolphinscheduler-dist/target

Standalone部署

使用root 用户部署, 启动standalone-server

/opt/DS/apache-dolphinscheduler-3.1.0-bin/bin/dolphinscheduler-daemon.sh start standalone-server
/opt/DS/apache-dolphinscheduler-3.1.0-bin/bin/dolphinscheduler-daemon.sh stop standalone-server
/opt/apache-dolphinscheduler-3.1.0-bin/bin/dolphinscheduler-daemon.sh status standalone-server

查看日志

tail -f /opt/DS/apache-dolphinscheduler-3.1.0-bin/standalone-server/logs/dolphinscheduler-standalone.log

登录页面

http://192.168.3.201:12345/dolphinscheduler/ui/

账号密码

admin/dolphinscheduler123

使用内置的H2数据库, 数据质量的规则列表查询有问题,所以使用mysql作为数据库。配置mysql数据库、hadoop、spark的环境变量
修改文件 /opt/DS/apache-dolphinscheduler-3.1.0-bin/bin/env/dolphinscheduler_env.sh

export DATABASE=${DATABASE:-mysql}
export SPRING_PROFILES_ACTIVE=${DATABASE}
export SPRING_DATASOURCE_DRIVER_CLASS_NAME=com.mysql.cj.jdbc.Driver
export SPRING_DATASOURCE_URL=jdbc:mysql://192.168.3.212:3306/dolphinscheduler3?characterEncoding=utf-8
export SPRING_DATASOURCE_USERNAME=root
export SPRING_DATASOURCE_PASSWORD=xxxxx

export HADOOP_HOME=${HADOOP_HOME:-=/home/hadoop/hadoop/hadoop-2.8.5}
export HADOOP_CONF_DIR=${HADOOP_CONF_DIR:-/home/hadoop/hadoop/hadoop-2.8.5/etc/hadoop}
export SPARK_HOME2=${SPARK_HOME2:-/home/hadoop/spark/spark-2.4.8-bin-hadoop2.7}

拷贝mysql-connector-java 到standalone-server的lib目录

/opt/dolphinscheduler/apache-dolphinscheduler-3.1.0-bin/standalone-server/libs/standalone-server

启动服务即可!

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

风的心愿

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值