sqoop
程序猿小飞
做好自己该做的事。
展开
-
sqoop的数据调度和导入hive表数据
sqoop的数据调度所上传到hdfs的和上传到hive的表不能重复从mysql到hdfs./sqoop import (输入命令)–connect jdbc:mysql://192.168.88.40:3306/lxq \ (指定连接jdbc端口和数据库名称)–username root (数据库用户名)–password 123456 (密码 若不适用明文指定数据库密码...原创 2019-01-15 12:02:04 · 807 阅读 · 0 评论 -
sqoop安装
安装sqoop的前提是已经具备java和hadoop的环境1、下载并解压最新版下载地址http://ftp.wayne.edu/apache/sqoop/1.4.6/2、修改配置文件(Hadoop的路径)$ cd $SQOOP_HOME/conf$ mv sqoop-env-template.sh sqoop-env.sh打开sqoop-env.sh并编辑下面几行:export HA...原创 2019-01-15 14:09:45 · 85 阅读 · 0 评论 -
sqoop 1.4.7 在进行mysql导入hive时遇到的坑
机器环境:hadoop-2.6.0-cdh-5.7.0hive-1.1.0-cdh5.7.0sqoop-1.4.6-cdh5.7.0``进行mysql导入hive的操作命令如下:./sqoop import –connect jdbc:mysql://192.168.66.30:3306/hadoop –username root --password 123456 –table...原创 2019-01-15 14:15:12 · 400 阅读 · 0 评论