sqoop basic
sqoop
hao难懂
这个作者很懒,什么都没留下…
展开
-
01sqoop安装
1.下载解压 官方网址:https://sqoop.apache.or) 下载地址:http://mirrors.hust.edu.cn/apache/sqoop/(目前1.4.6以删除,只有1.4.7) 上传安装包并解压到指定目录 tar -zxf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /root/app/ 2.修改配置文件 2.1重命名...原创 2019-08-22 16:46:38 · 89 阅读 · 0 评论 -
02sqoop导入数据
一、准备 1.概念 在Sqoop中,“导入”概念指:从非大数据集群(RDBMS)向大数据集群(HDFS,HIVE,HBASE)中传输数据, 叫做:导入,即使用import关键字。 2.创建表并插入数据 mysql -uroot -p000000 create database company; create table company.staff(id int(4) primar...原创 2019-08-22 16:47:49 · 117 阅读 · 0 评论 -
03sqoop导出数据
1.概念 在Sqoop中,“导出”概念指:从大数据集群(HDFS,HIVE,HBASE)向非大数据集群 (RDBMS)中传输数据,叫做:导出,即使用export关键字。 2.从HIVE/HDFS到RDBMS bin/sqoop export \ --connect jdbc:mysql://hadoop102:3306/company \ --username root \ --password...原创 2019-08-22 16:48:57 · 172 阅读 · 0 评论 -
04sqoop脚本打包
1.创建一个.opt文件 mkdir opt touch opt/job_HDFS2RDBMS.opt 2.编写sqoop脚本 vi opt/job_HDFS2RDBMS.opt export --connect jdbc:mysql://hadoop102:3306/company --username root --password 000000 --table staff -...原创 2019-08-22 16:49:45 · 120 阅读 · 0 评论 -
sqoop详解
1.准备 拷贝驱动 cp mysql** /root/apps/sqoop/lib 修改配置文件 vi sqoop-env.sh 验证 bin/sqoop help 2.尝试连接 bin/sqoop list-databases \ --connect jdbc:mysql://192.168.159.10:3306/ \ --username root --password root 3....原创 2019-09-03 20:13:11 · 210 阅读 · 0 评论