Sqoop
WTFibo
I am writing bugs
展开
-
sqoop使用教程
1.sqoop导数据0.基础使用sqoop list-databases--connect "jdbc:mysql://10.1.6.21:3306/"--username root --password 123456sqoop list-tables--connect "jdbc:mysql://10.1.6.21:3306/platform_log"--username root --pass...原创 2018-02-07 20:00:34 · 3376 阅读 · 0 评论 -
sqoop安装
0.下载sqoop 使用1.x版本1.拷贝MySQL的jdbc驱动包mysql-connector-Java-5.1.31-bin.jar到sqoop/lib目录下。2.配置环境变量#sqoopexport SQOOP_HOME=/data/sqoopexport PATH=$PATH:$SQOOP_HOME/bin3.复制s原创 2018-02-07 19:46:49 · 160 阅读 · 0 评论 -
sqoop报错:ERROR tool.ImportTool: Error during import: Import job failed
可能是文件权限修改hive数据仓库权限hadoop fs -chmod 777 /data/hivehadoop fs -chmod 777 /data/hive/warehouse原创 2018-02-07 19:51:40 · 8094 阅读 · 2 评论 -
sqoop报错:java.io.IOException: SQLException in nextKeyValu
sqoop从mysql导数据到hive的时候,报错:java.io.IOException: SQLException in nextKeyValueat org.apache.sqoop.mapreduce.db.DBRecordReader.nextKeyValue(DBRecordReader.java:266)at org.apache.hadoop.mapred.MapTa...原创 2018-02-07 19:55:35 · 10057 阅读 · 0 评论 -
sqoop密码访问
1.显示指定账号密码2.文件模式在当前用户下新建.password文件,并保存数据库密码$ echo -n "password" > .password 将.password文件上传至当HDFS用户目录下$ hdfs dfs -put .password /user/hadoop/给.password文件授予400权限$ hdfs dfs -c原创 2018-02-07 19:56:47 · 277 阅读 · 0 评论