Sqoop1安装

1、下载: http://mirrors.hust.edu.cn/apache/sqoop/1.4.7/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz
2、将sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz上传至master机器的~/bigdata目录下,且解压
3、配置Sqoop环境变量:

vi ~/.bash_profile
export SQOOP_HOME=/home/hadoop-jrq/bigdata/sqoop-1.4.7.bin__hadoop-2.6.0
PATH=....:$SQOOP_HOME/bin

4、将mysql的jdbc驱动jar包扔到$SQOOP_HOME/lib下
5、执行sqoop help命令看看sqoop是否安装成功
6、执行命令:start-dfs.sh和start-yarn.sh

简单的sqoop例子,将mysql中的movie表数据导入到HDFS中
sqoop import --connect jdbc:mysql://master:3306/movie --username root --password root --table movie --split-by id

–split-by id 按照ID字段进行分区,默认是4个分区

如果报MySQL的权限错误,请执行:
grant all privileges on . to root@master identified by ‘1234’;
flush privileges;

报的哪台机器权限不够,就往哪台机器加权限

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值