Sqoop 增量同步(自动更新 last value)
我们在使用Sqoop进行增量同步的时候,是需要指定 last value 的。但一般我们都是自动化进行数据同步的,这就需要有一个地方,能够自动记录和填充 上次增量同步的 last value。抛开 手动 维护这个 last value,繁琐,而且还很容易失败。后面查了下Sqoop 的官网,发现 Sqoop job 提供了类似的功能。这里记录下,供后续查看。官方文档 上面有详细的说明,这里说明下几个点:1. 目的The job tool allows you to create and work w
原创
2021-07-29 12:22:30 ·
3424 阅读 ·
0 评论