Hadoop之sqoop安装

最新推荐文章于 2024-04-28 17:34:48 发布

July-two

最新推荐文章于 2024-04-28 17:34:48 发布

阅读量362

点赞数 2

分类专栏： sqoop

本文链接：https://blog.csdn.net/weixin_43999099/article/details/103102598

版权

sqoop 专栏收录该内容

1 篇文章 0 订阅

订阅专栏

Hadoop之sqoop安装

目录：
1.sqoop安装
2.Sqoop显示MySQL数据库有哪些数据库
3. Sqoop显示MySQL中mysql数据库中有哪些表
4. Sqoop导入mysql数据库中help_keyword表到HDFS，数据之间以制表符分隔

1.sqoop安装

1.1下载并上传sqoop压缩包

下载sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar压缩包
提取码：0zp4

1.2 解压sqoop 到指定路径

 1  tar -zxf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/

在这里插入图片描述

1.3 改名sqoop

1  cd /opt
2  mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha sqoop

在这里插入图片描述

1.4 添加环境变量，后刷新环境变量

1  vi /etc/profile
2  添加内容：
   export SQOOP_HOME=/opt/sqoop
   export PATH=$PATH:$SQOOP_HOME/bin
3  source /etc/profile  #刷新环境变量

1.5 复制sqoop-env-template.sh 并改名为sqoop-env.sh,修改sqoop-env.sh

1  cd /opt/sqoop/conf
2  scp sqoop-env-template.sh /opt/sqoop/conf/sqoop-env.sh
3  vi sqqoop-env.sh
4  修改内容：

在这里插入图片描述

1.6 下载并上传MySQL连接包到sqoop的lib下

下载mysql-connector-java-5.1.40-bin.jar
提取码：uz1r

查看结果：

在这里插入图片描述

1.7 验证sqoop安装配置是否成功

1   sqoop help

在这里插入图片描述

2.Sqoop显示MySQL数据库有哪些数据库

1 sqoop list-databases --connect jdbc:mysql://localhost:3306/ --username root --password 123456 
 #--connect jdbc 连接地址
 #--username  用户名
 #--password mysql密码

在这里插入图片描述

3. Sqoop显示MySQL中mysql数据库中有哪些表

1 sqoop list-tables --connect jdbc:mysql://localhost:3306/mysql --username root --password 123456

4. Sqoop导入mysql数据库中help_keyword表到HDFS，数据之间以制表符分隔

1 sqoop import --connect jdbc:mysql://localhost:3306/mysql --username root --password 123456 --table help_keyword  --input-fields-terminated-by '/t' --target-dir /root/data/re
 #--input-fields-terminated-by '/t'  以/t为分隔符
 #--target-dir  导入路径