2021SC@SDUSC(DolphinScheduler报告)

本文详细介绍了Apache DolphinScheduler的安装和部署过程,包括后端的自动安装、报错解决、前端的下载安装及自动化部署脚本的执行。同时,文章还提到了组内任务分工,涉及DolphinScheduler的不同组件的开发与维护。
摘要由CSDN通过智能技术生成

2021SC@SDUSC

目录

一.代码的下载和安装配置

1.部署后端

1.1后端安装,支持自动安装,源码编译安装,这里使用自动安装

1.2报错解决

2.部署前端

2.1下载安装包并解压

2.2执行自动化安装部署脚本

2.3报错解决​

二.组内任务划分:


一.代码的下载和安装配置

安装包下载地址:https://dolphinscheduler.apache.org/en-us/docs/user_doc/download.html

1.部署后端

1.1后端安装,支持自动安装,源码编译安装,这里使用自动安装

准备,创建新用户big-data,修改用户权限,赋予sudo权限

 $ chmod 640 /etc/sudoers && vim /etc/sudoers 
 #在root    ALL=(ALL)       ALL行下添加:
 big-data  ALL=(ALL)       NOPASSWD: NOPASSWD: ALL


给big-data配置ssh免密(从node1开始,每个节点执行)

node1: ssh-keygen -t rsa
登录各节点执行ssh-keygen -t rsa 一路回车到结束,在~/.ssh/下面会生成一个公钥文件id_rsa.pub
cat  ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 将公钥追加到authorized_keys
$ chmod 600  ~/.ssh/authorized_keys 修改权限
将 ~/.ssh/authorized_keys从当前节点分发到其他各个节点。如:
scp  ~/.ssh/authorized_keys big-data@hdfs1:~/.ssh/

创建元数据库:

CREATE DATABASE escheduler DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
GRANT ALL PRIVILEGES ON escheduler.* TO 'escheduler'@'%' IDENTIFIED BY 'escheduler';
flush privileges;

创建安装目录:

 $ sudo mkdir /opt/dolphinScheduler  
 #修改部署目录权限
 $ chown bi

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值