并发补分区表数据的时候用msck repair table命令修复分区的时候,正好datax也在往表里面写数据,datax是先写入临时目比如pt=20211011_xxxxx,这样这个命令就会把这个临时目录也修复成分区了,就会多了很多没有意义的分区写入元数据,解决办法,还是用alter table add partition去增加分区
msck repair table修复分区和datax的一些问题
最新推荐文章于 2024-04-11 14:14:58 发布
![](https://img-home.csdnimg.cn/images/20240711042549.png)
并发补分区表数据的时候用msck repair table命令修复分区的时候,正好datax也在往表里面写数据,datax是先写入临时目比如pt=20211011_xxxxx,这样这个命令就会把这个临时目录也修复成分区了,就会多了很多没有意义的分区写入元数据,解决办法,还是用alter table add partition去增加分区