学习sqoop2
0我是书生0
路漫漫其修远兮,吾将上下而求索
展开
-
sqoop2 去除单引号与自定义分隔符
1、缘由(需求) 正在做oracle到hive的数据导入,遇到数据分隔问题,sqoop2 默认分隔式逗号,我使用hive 也是逗号分隔,发现数据中含有逗号的字段,hive把它分成了好几个。于是去网上找自定义分隔的解决方法,但是无奈这方面的资料很少。不解决此问题,工作无法进行。胜了最后一个法宝,编译源码。2、去下载跟你使用的一个版本的sqoop2 源码(最好),使用maven构建,原创 2015-12-13 10:01:43 · 5062 阅读 · 0 评论 -
sqoop2 java 批量入库程序
1、需求,sqoop2写命令太麻烦,于是写了一个通用型的java 的sqoop2导入程序,很简单,有什么不足,望各位看官指出。import org.apache.sqoop.client.SqoopClient;import org.apache.sqoop.model.MConnector;import org.apache.sqoop.model.MDriverConfig;impo原创 2016-01-07 09:43:45 · 2320 阅读 · 1 评论