在创建表的时候,往往会关联ID字段,ID字段的类型会有STRING和INT,BIGINT等等。底层会自动去关联STRING跟INT STRING跟BIGINT,但是会出现数据倾斜的问题。 所以尽量在创建表的时候,保持表的类型一致。在join的时候会减少数据倾斜的产生。
HIVE-字段类型造成的数据倾斜
最新推荐文章于 2024-07-24 17:30:44 发布
在创建表的时候,往往会关联ID字段,ID字段的类型会有STRING和INT,BIGINT等等。底层会自动去关联STRING跟INT STRING跟BIGINT,但是会出现数据倾斜的问题。 所以尽量在创建表的时候,保持表的类型一致。在join的时候会减少数据倾斜的产生。