- 博客(2)
- 资源 (1)
- 收藏
- 关注
RSS订阅
原创 基于kafka的oracle实时同步
由于项目用到了基于oracle非入侵式日志实时同步cdc模式，但是ogg价格昂贵，有些项目不愿意花这部分钱来做数据实时同步，后面公司大牛推荐，自己研究了下基于kafka-connect的oracle实时同步。github源码地址：https://github.com/erdemcer/kafka-connect-oracle上面清晰的写了部署步骤。1、需要开启oracle归档日志2、...
2019-01-28 16:06:48
9245
14
原创 datax一次读，多次写改造
datax一次读，多次写改造 第一次写技术类文章，写的不好请不要喷，最近公司在用datax进行数据同步，但是由于datax只支持一次读，一次写模式，如果我一份数据要分发到多处就会频繁读、写极大浪费资源，所以就下载了datax源码，尝试能否改造为一次读，多次写这样的模式，经过一点点debug以及源码的查看，了解datax的传输机制，决定尝试修改源码，经过几天还真的搞出来了，下面是我测试的job ...
2018-04-03 15:29:07
5055
14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人