kettle
TracyGao01
保持专注
展开
-
Kettle取代sqoop,实现hbase2mysql,mysql2hbase(小试)
背景:由于之前传统的数据库数据采集及集成到hbase,都在用sqoop(1.46),但是发现比较麻烦,虽然脚本很简单,但是还是比较繁琐,且发现各种bug,问题很多,就想采用kettle来做,本文档主要是对kettle可行性的调研本文采用kettle最新版本:7.1 (傻瓜式安装) cdh版本为5.11.0操作流程:由于最新版本的插件kettle7.1只能支持cdh5.10,...原创 2017-07-08 17:11:15 · 9740 阅读 · 0 评论 -
kettle oracle2hbase生产环境下的真实使用 (做到数据准实时采集)
Kettle实现oracle到hbase的数据抽取 本文采用kettle最新版本:7.1 (安装:下载下来后,直接解压就可以) cdh版本为5.11.0 一、 环境配置操作流程:(1) 由于最新版本的插件kettle7.1只能支持cdh5.10,所以我们要更改kettle的shim插件,主要操作就是替换jar包,如图:首先hadoop的j...原创 2017-10-25 10:28:39 · 3475 阅读 · 0 评论 -
kettle Mysql处理timestamp数据格式数据异常
解决: zeroDateTimeBehavior convertToNull原创 2018-04-04 11:14:21 · 2243 阅读 · 0 评论