sqoop 从oracle导数据到hive遇到的问题

sqoop 从oracle导数据到hive遇到的问题

应用sqoop导数据到hive
./sqoop import --hive-import --connect jdbc:oracle:thin:@192.168.1.238:1521:orcl --username test --password test --table S_24_56_ONE_RES --hive-database myhive
出现问题
java.sql.SQLEXECEPTION:IO Error:Connection reset
可能原因是
1.网络不稳定
2.数据库连接被其他线程关闭

重新执行命令
./sqoop import --hive-import --connect jdbc:oracle:thin:@192.168.1.238:1521:orcl --username TEST --password test --table S_CARDLOG_24_56 --fields-terminated-by ‘\t’ --hive-database myhive -m 1;

报错：
ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: No columns to generate for ClassWriter

这个问题主要是由于缺少在地图任务执行的主机上的快速随机数生成设备。
用SQOOP导入命令传递下面的参数
export HADOOP_OPTS=-Djava.security.egd=file:/dev/…/dev/urandom
sqoop import -D mapred.child.java.opts="-Djava.security.egd=file:/dev/…/dev/urandom"

解决