sqoop 整库导入数据hive

2019独角兽企业重金招聘Python工程师标准>>>

1、整库导入

sqoop  import-all-tables --connect jdbc:mysql://ip:3306/dbname  --username user --password password --hive-database abc  -m 10  --create-hive-table  --hive-import --hive-overwrite 

 import-all-tables :导入所有表

--connect :连接的url地址

--username:mysql用户名

--password:mysql密码

--hive-database：导入到hive的数据库

-m：指定几个map任务，如果没有主键，只能有一个map    例如：-m 1

 --create-hive-table :创建表，如果不创建表，hive里是没有表的。

 --hive-import：导入数据到hive里

 --hive-overwrite ：覆盖导入

转载于:https://my.oschina.net/internetafei/blog/481505