最近在对数据流转的处理中,采用了很多动态分区的方式。
这次出现的问题是动态分区过程中,出现了分区为__HIVE_DEFAULT_PARTITION__
的分区。经查证是因为分区字段为空或者''导致,所以分区的时候尽量选择有值的字段,如果碰到确实有字段为空,需要查明什么原因导致。
最近在对数据流转的处理中,采用了很多动态分区的方式。
这次出现的问题是动态分区过程中,出现了分区为__HIVE_DEFAULT_PARTITION__
的分区。经查证是因为分区字段为空或者''导致,所以分区的时候尽量选择有值的字段,如果碰到确实有字段为空,需要查明什么原因导致。