bigdata
文章平均质量分 67
乱纪元也不脱水
有5年统一通信开发管理经验,4年互联网开发管理经验,2年云计算及深度学习经验,目前从事大数据以及AI相关工作
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
CDH中安装使用sqoop2
由于我们的Hadoop、Hive等集群都是通过CDH安装部署的,而且CDH本身支持sqoop安装,因此直接就在这里安装测试了。CDH版本:5.14.x 安装过程如下:点击首页的“Cluster 1”进入Cluster 1界面后,点击Clusters->Add Service在Service列表中找到sqoop:这里我们可以看到有Sqoop 1 Client和Sqoop2,并且Sqoop2的描...原创 2018-05-09 10:45:15 · 7505 阅读 · 3 评论 -
阿里云开源离线同步工具DataX3.0介绍
一. DataX3.0概览 DataX 是一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。设计理念为了解决异构数据源同步问题,DataX将复杂的网状的同步链路变成了星型数据链路,DataX作为中间传输载体负责连接各种数据源。当需要接入一个新的数据源的时候,只需要将此数...转载 2018-05-07 10:33:50 · 680 阅读 · 0 评论
分享