sqoop-1.4.6小应用

使用sqoop-1.4.6由mysql向hive导入数据:

sqoop import --connect "jdbc:mysql://ip:mysql_port/mysql_database_name?useUnicode=true&characterEncoding=UTF-8" --username mysql_user_name --password mysql_user_password --table mysql_table --columns "movie_id,repost_num,comment_num,praise_num,uid,task_time" --where "DATE(task_time)<>'0000-00-00'" --hive-import --hive-database hive_database_name --hive-overwrite --create-hive-table --hive-table hive_table --null-string '\\N' --null-non-string '\\N' --fields-terminated-by '\t' --lines-terminated-by '\n'

备注:

         mysql_user_name拥有操作mysql权限的用户名称

         mysql_user_password:是mysql_user_name用户操作mysql的密码

        movie_id,repost_num,comment_num,praise_num,uid,task_time :为需要向hive中导入的mysql字段属性

        "DATE(task_time)<>'0000-00-00' :为sqoop导入hive的判定条件

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值