datahub元数据管理部署、使用中遇到的问题,记录一下,方便后面查看。
1. ingest mysql data时,任务失败:
解决办法:去docker datahub-datahub-action-1容器中,修改了pip源:
mkdir ~/.pip
cd ~/.pip
nano pip.conf
[global]
timeout = 6000
index-url =https://mirrors.aliyun.com/pypi/simple/
[install]
trusted-host = mirrors.aliyun.com
如果容器中没有文件编辑器,安装nano或者vim,nano比vim容易安装一点:
apt-get install nano
apt-get install vim
- ingest mysql data task failed: Connection refused
source:
type: mysql
config:
host_port: '192.168.12.41:3306'
username: xxx
password: xxx
database: test
sink:
type: datahub-rest
config:
server: 'http://datahub-gms:8080'
首先看看mysql配置是否正确,第二看看sink端是否正确,sink server是gms服务,http方式采用http://gms:8080,gms为docker container的名字解决办法:
datahub4229
datahubdoc
- 不知道怎么添加user & group
- 添加完的domain,无法匹配到entity上
- clickhouse无密码时,怎么配置recipe.yml?
持续更新中。
我是Lee,爱学习,爱写东西。
再见。