hive动态分区

最新推荐文章于 2024-03-07 15:04:54 发布

CrazyL-

最新推荐文章于 2024-03-07 15:04:54 发布

阅读量1k

点赞数

分类专栏：云计算+大数据文章标签： hive 动态分区

本文链接：https://blog.csdn.net/lovelovelovelovelo/article/details/52253543

版权

本文介绍了Hive的动态分区功能，允许根据数据内容动态创建分区，避免为每个分区写单独的插入语句。内容包括如何使用addr字段作为分区，处理多个字段的分区情况，以及与静态分区的结合使用。

摘要由CSDN通过智能技术生成

不需要为不同的分区添加不同的插入语句
分区不确定，需要从数据中获取
几个参数：

set hive.exec.dynamic.partition=true//使用动态分区
set hive.exec.dynamic.partition.mode=nonstrick//无限制模式，如果模式是strict，则必须有一个静态分区，切放在最前面
set hive.exec.max.dynamic.partitions.pernode=10000//每个节点生成动态分区的最大个数
set h