搭建单机版DolphinScheduler

tar -zxvf  xxx.tar.gz  -C /opt/installs/

一、单机版概述

①单机模式(standalone)模式下,所有服务均集中于一个StandaloneServer进程中,并且其中内置了注册中心Zookeeper和数据库H2(基于内存的)。只需配置JDK环境,就可一键启动DolphinScheduler,快速体验其功能。

②Standalone 仅建议 20 个以下工作流使用,因为其采用内存式的 H2 Database, Zookeeper Testing Server,任务过多可能导致不稳定,并且如果重启或者停止 standalone-server 会导致内存中数据库里的数据清空。 因此我们此次安装的是将H2数据库换成MySQL数据库,这样可以保证重启或者停止服务后数据库里的数据不会被清空

二、配置链接

 https://dolphinscheduler.apache.org/zh-cn/docs/3.2.0/guide/installation/standalone

三、搭建流程 

1.第一步:上传包、解压 

   要使用新版本的DS:apache-dolphinscheduler-3.1.8-bin

tar -zxvf  xxx.tar.gz  -C /opt/installs/

2.第二步:将mysql的驱动包拷贝到所有的服务的jars目录下 

cd /opt/installs/apache-dolphinscheduler-3.1.8-bin

cp /opt/installs/hive/lib/mysql-connector-java-8.0.26.jar ./api-server/libs/
cp /opt/installs/hive/lib/mysql-connector-java-8.0.26.jar ./alert-server/libs/
cp /opt/installs/hive/lib/mysql-connector-java-8.0.26.jar ./master-server/libs/
cp /opt/installs/hive/lib/mysql-connector-java-8.0.26.jar ./worker-server/libs/
cp /opt/installs/hive/lib/mysql-connector-java-8.0.26.jar ./tools/libs/
cp /opt/installs/hive/lib/mysql-connector-java-8.0.26.jar ./standaloneserver/libs/standalone-server/

3.在linux的mysql中创建一个数据库dolphinscheduler

--创建dolphinscheduler数据库
CREATE DATABASE dolphinscheduler DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;

--创建用户[非必须的]
--假如你想创建,会遇到密码太简单的问题:
--如果提示密码等级过低:进行如下操作(mysql8版本)
set global validate_password.policy=LOW;
set global validate_password.length=4;
set global validate_password.mixed_case_count=0;
set global validate_password.number_count=0;
set global validate_password.special_char_count=0;
--运行是可能会变红,不用管,继续运行即可

--创建新用户:
CREATE USER 'dolphinscheduler'@'%' IDENTIFIED BY '123456';
GRANT ALL PRIVILEGES ON dolphinscheduler.* TO 'dolphinscheduler'@'%';
FLUSH PRIVILEGES;

4.第四步:初始化数据库(linux黑窗口执行)

bash /opt/installs/tools/apache-dolphinscheduler-3.1.8-bin/bin/upgrade-schema.sh

5.第五步:修改配置文件

①在下面路径下找到application.yaml 文件:

/opt/installs/apache-dolphinscheduler-3.1.8-bin/standalone-server/conf/application.yaml

②修改 DolphinScheduler 的配置:
将其中关于数据库连接的部分修改为指向你的 MySQL 实例,包括用户名、密码、数据库名等信息。以下是修改后的示例:

datasource:
    driver-class-name: com.mysql.cj.jdbc.Driver
    url: jdbc:mysql://bigdata01:3306/dolphinscheduler?useUnicode=true&characterEncoding=UTF-8&useSSL=false&allowPublicKeyRetrieval=true
    username: dolphinscheduler
    password: 123456

 6.第六步:启动

#要在/opt/installs/apache-dolphinscheduler-3.1.8-bin路径下运行
# 启动 Standalone Server 服务
bash ./bin/dolphinscheduler-daemon.sh start standalone-server
# 停止 Standalone Server 服务
bash ./bin/dolphinscheduler-daemon.sh stop standalone-server
# 查看 Standalone Server 状态
bash ./bin/dolphinscheduler-daemon.sh status standalone-server

启动成功后会有StandaloneServer服务:

7.访问web界面

访问地址:http://bigdata01:12345/dolphinscheduler/ui
账号和密码:  admin  dolphinscheduler123

 四、进入页面遇到的一些问题

1.第一个问题:上传资源提示 存储未启用 如何开启HDFS

 解决方案:修改standalone-server下的common.properties

找到/opt/installs/apache-dolphinscheduler-3.1.8-bin/standalone-server/conf

修改如下:

resource.storage.type=HDFS
resource.storage.upload.base.path=/dolphinscheduler
resource.hdfs.fs.defaultFS=hdfs://bigdata01:9820

修改hdfs的权限:
hdfs dfs -chmod -R 777 /

重启服务:

#重启服务(/opt/modules/apache-dolphinscheduler-3.1.8-bin/bin/)
# 停止 Standalone Server 服务
./dolphinscheduler-daemon.sh stop standalone-server
# 启动 Standalone Server 服务
./dolphinscheduler-daemon.sh start standalone-server

2.第二个问题:安全中心的一些配置需要自行配置

①创建租户

②创建用户

③创建项目并授权

  ......

  • 20
    点赞
  • 29
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值