![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据治理
文章平均质量分 72
云百佰
平平淡淡的码农
展开
-
canal 全量/增量数据同步说明
一、日志文件完整1、全量数据同步1、修改\canal.deployer-1.1.5\conf\example下的instance.properties通过以下三个配置实现canal全量数据同步# mysql日志文件canal.instance.master.journal.name=mysql-bin.000001# 获取日志的起始位置canal.instance.master.position=0# 获取日志的起始时间戳canal.instance.master.timestamp=16原创 2021-09-29 10:07:05 · 7666 阅读 · 1 评论 -
数据治理平台Apache Atlas搭建与导入hive表
一、Atlas2.1.0编译编译环境:环境准备,jdk8_151以上,maven3.6.6下载源码包:国内下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/atlas/2.1.0/官方下载地址:http://atlas.apache.org/Downloads.html编译:解压源码包,进入解压后源码包的目录。cd /optsudo tar -zxvf apache-atlas-2.1.0-sources.tar.gz #重命名mv原创 2020-10-30 09:04:38 · 1513 阅读 · 0 评论 -
Atlas2.1.0——编译安装使用
一、Atlas2.1.0编译编译环境:环境准备,jdk8_151以上,maven3.6.6下载源码包:国内下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/atlas/2.1.0/官方下载地址:http://atlas.apache.org/Downloads.html编译:1. 解压源码包,进入解压后源码包的目录。sudo tar -zxvf apache-atlas-2.1.0-sources.tar.gz #重命名mv ./apach原创 2021-01-22 17:07:03 · 574 阅读 · 0 评论