Sqoop
斌小哥
这个作者很懒,什么都没留下…
展开
-
基于Sqoop 1.4.7 实现关系型数据库 到HDFS的数据传输
1、Sqoop Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。 Sqoop现有两个主要版本,分别为1.4.7版本、1.99.7版本。 1.4.7即为常说的Sqoop1版本,Hadoop环境是基于1.x...原创 2018-12-16 20:22:04 · 378 阅读 · 2 评论 -
基于Sqoop2 实现关系型数据库到HDFS的数据传输
1、下载安装包 下载地址: http://mirror.bit.edu.cn/apache/sqoop/1.99.7/ 2、上传安装包,解压目录。我的安装目录为 /opt tar -zxvf sqoop-1.99.7-bin-hadoop200.tar.gz mv sqoop-1.99.7-bin-hadoop200 sqoop 3、配置环境变量 vim /etc/profile...原创 2018-12-16 21:03:33 · 321 阅读 · 0 评论 -
Sqoop2 shell命令的使用
Sqoop2的安装以及配置,参考链接 基于Sqoop2 实现关系型数据库到HDFS的数据传输 1、设置sqoop服务端 set server -u http://master:12000/sqoop 2、创建link 先查看现有的cennector,通过 show connector 可以查看到几种connector的方式 show connector 这里我以mysql ...原创 2018-12-16 21:30:55 · 1766 阅读 · 0 评论