DataX中的数据交互源码探究
因为工作的原因,需要排查数据源端到目标端的数据是否丢失,正好有机会研究一下datax的源码.
这里我们探索的oracleReader和kuduWriter的数据交互,其他的组件原理类似
第一步:查看oracleReader端
图中标红的地方就是我们开始探索的入口
第二步:查看数据的查询和写入队列中
这里面重点关注sendToWriter,经过日志的打印,我们知道该实现类是BufferedRec...
原创
2019-12-12 11:07:25 ·
346 阅读 ·
0 评论