DolphinScheduler-安装

最新推荐文章于 2024-07-22 19:45:44 发布

a-tao必须奥利给

最新推荐文章于 2024-07-22 19:45:44 发布

阅读量988

点赞数

文章标签： hadoop hdfs 大数据分布式

本文链接：https://blog.csdn.net/weixin_48370579/article/details/126258614

版权

DolphinScheduler-安装

1、上传解压

tar -zxvf DolphinScheduler-bin.tar.gz

2、修改配置文件

cd conf
2.1、修改mysql链接配置
vim datasource.properties
修改一下配置
spring.datasource.driver-class-name=com.mysql.jdbc.Driver
spring.datasource.url=jdbc:mysql://node1:3306/dolphinscheduler?characterEncoding=UTF-8&allowMultiQueries=true
spring.datasource.username=root
spring.datasource.password=123456

2.2、修改安装配置
vim config/install_config.conf
mysql地址
dbhost="master:3306"
mysql用户名
username="root"
数据库名
dbname="dolphinscheduler"
mysql密码
password="123456"
zookeeper链接地址
zkQuorum="master:2181" --- 如果是分布式的话，就不是这样了，每个节点都需要配
dolphinscheduler安装路径
installPath="/usr/local/soft/dolphinscheduler"

安装用户
deployUser="root"

配置邮箱服务器，需要开启邮箱smtp服务
mailServerHost="smtp.163.com"
端口号
mailServerPort="25"
邮箱地址
mailSender="mllib_fiy@163.com"
用户名和邮箱地址一致
mailUser="mllib_fiy@163.com"
邮箱密码
mailPassword="PQUFLTJBDEASRRSX"

starttlsEnable="false"

hdfs访问地址
defaultFS="hdfs://master:9000"
dolphinscheduler上传到hdfs路径
resourceUploadPath="/dolphinscheduler"
上传文件使用的用户名
hdfsRootUser="root"

2.3、修改环境变量
vim env/dolphinscheduler_env.sh

export JAVA_HOME=/usr/local/soft/jdk1.8.0_171
export HADOOP_HOME=/usr/local/soft/hadoop-2.7.6
export HADOOP_CONF_DIR=/usr/local/soft/hadoop-2.7.6/etc/hadoop
export ZOOKEEPER_HOME=/usr/local/soft/zookeeper-3.4.6
export SPARK_HOME2=/usr/local/soft/spark-2.4.5
export DATAX_HOME=/usr/local/soft/datax/bin/datax.py

export PATH=$HADOOP_HOME/bin:$SPARK_HOME2/bin:$PYTHON_HOME:$JAVA_HOME/bin:$HIVE_HOME/bin:$PATH:$FLINK_HOME/bin:$DATAX_HOME:$PATH