大数据dolphinscheduler 本地容器化安装

本文介绍了如何在本地环境中使用Docker安装和配置Minio存储服务,以及如何将其与Dolphinscheduler的standalone-server集成,包括设置S3连接和修改配置文件以实现容器间访问。
摘要由CSDN通过智能技术生成

Minio 容器安装

docker run -p 9000:9000 -p 9090:9090 --name minio -d -e "MINIO_ACCESS_KEY=minioadmin"  -e "MINIO_SECRET_KEY=minioadmin"  -v D:\SF\DOCKER\minio\data:/data  -v D:\SF\DOCKER\minio\config:/root/.minio   minio/minio server  /data --console-address ":9090" -address ":9000"

本地创建文件夹:

D:\SF\DOCKER\minio\data
D:\SF\DOCKER\minio\config

登录创建bucket
登录地址:http://127.0.0.1:9090/
用户名密码:minioadmin/minioadmin
在这里插入图片描述

部署 dolphinscheduler-standalone-server

拷贝配置文件到本地

1、启动一个标准容器

docker run --name dolphinscheduler-standalone-server -p 12345:12345 -p 25333:25333  -d apache/dolphinscheduler-standalone-server:3.1.5

2、将标准配置文件拷贝到本地

docker cp dolphinscheduler-standalone-server:/opt/dolphinscheduler/conf  D:\SF\DOCKER\dolphinscheduler\

3、删除标准容器

docker rm -f dolphinscheduler-standalone-server

修改配置

修改配置文件conf: common.properties 文件

# resource storage type: HDFS, S3, OSS, NONE 将NONE修改为S3
resource.storage.type=S3
# 本地容器之间访问主机localhost配置
resource.aws.s3.endpoint=http://host.docker.internal:9000

注:minio配置 resource.aws.*

容器启动

docker run --name dolphinscheduler-standalone-server -p 12345:12345 -p 25333:25333 -v D:\SF\DOCKER\dolphinscheduler\data:/tmp/dolphinscheduler -v D:\SF\DOCKER\dolphinscheduler\conf:/opt/dolphinscheduler/conf -d apache/dolphinscheduler-standalone-server:3.1.5

登录

登录

http://localhost:12345/dolphinscheduler
用户名/密码:admin/dolphinscheduler123
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

王小工

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值