![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
sqoop
文章平均质量分 71
iteye_3893
这个作者很懒,什么都没留下…
展开
-
sqoop 三库导入导出写法
0 如下所有命令 在命令行应该写成一行 这里是为了读取方便而故意折行写出来 1 sqoop <---------> mysql mysql ---> hdfssqoop import --connect jdbc:mysql://172.16.252.227:3306/test --username root --password r...原创 2015-06-10 10:06:26 · 117 阅读 · 0 评论 -
sqoop详细流程
源自 about 云 http://www.aboutyun.com/thread-6242-1-1.html http://www.aboutyun.com/thread-10445-1-1.html sqoop源码分析 about良心作品原创 2015-07-01 21:35:24 · 463 阅读 · 0 评论 -
sqoop 详细文档
Sqoop中文手册http://www.zihou.me/html/2014/01/28/9114.html http://www.aboutyun.com/thread-9828-1-1.html原创 2015-07-02 17:39:19 · 170 阅读 · 0 评论 -
sqoop-javabean-sqoop脚本分隔符失效问题
a 介绍背景:这边我的sqoop抽数流程是这样1 将关系库对应表通过sqoop导出成javabean2 将javabean在eclipse中针对字段做一些预处理,比如日期字段为Null下设置初始值3 将处理好的javabean打包,后通过sqoop将关系数据库数据导出时指定这个包和对应类即可 这样做的目的是在导数的过程中,sqoop借助hadoop的力量将原数...原创 2015-08-16 16:24:02 · 324 阅读 · 0 评论 -
sqoop从oracle倒数时为null的问题
1 现象:通过sqoop将oracle表数据导入hdfs,在oracle的数据为null下,sqoop自动将null变成null字符串存储到hdfs上这样,在执行hive脚本: case when a.begindate is not null and a.enddate >= '%current_date%' and instrfun(a.status,'无效')...原创 2015-10-08 17:53:34 · 409 阅读 · 0 评论 -
sqoop经典生产应用总结
http://blog.csdn.net/lili72/article/details/40899277 --null-string '\\N' --null-non-string '\\N'hive中null在hdfs为 \N表示对关系数据库下字段如果为null的string 那么赋值到hdfs为 \\N , 其中\为转义如果关系库表字段不是str...原创 2015-10-08 18:04:42 · 154 阅读 · 0 评论 -
sqoop安装和简单使用
1 简介:a) SQOOP是用于对数据进行导入导出的。 (1)把MySQL、Oracle等数据库中的数据导入到HDFS、Hive、HBase中 (2)把HDFS、Hive、HBase中的数据导出到MySQL、Oracle等数据库中 b) 官网地址 http://sqoop.apache.org/ 2 安装:// 解压和重命名[root@mas...原创 2014-12-29 16:02:51 · 250 阅读 · 0 评论 -
sqoop 常用写法
0 参考链接: http://www.cnblogs.com/cenyuhai/p/3306037.html sqoop 常用命令整理(一) http://www.cnblogs.com/cenyuhai/p/3306056.html sqoop 常用命令整理(二) 如下是 我工作中遇到的东西,每条语句都本机测试通过: 1 查看所有...原创 2015-04-20 17:55:50 · 316 阅读 · 0 评论