[博学谷学习记录]超强总结,用心分享|关于hive的排序

hive的排序有四种:

1. ORDER BY用于全局排序,就是对指定的所有排序键进行全局排序,使用ORDER BY的查询语句,最后会用一个Reduce Task来完成全局排序。与设置的ReduceTask个数无关

2.Sort By用于分区内排序,即保证每个Reduce任务内排序。sort by只保证每个reducer的输出有序,不保证全局有序

3.distribute by(字段)根据指定的字段将数据分到不同的reducer,且分发算法是hash散列

4.cluster by(字段)如果distribute by和sort by字段是同一个时,此时,cluster by=distribute by+sort by。当reduce的个数少于key的个数的时候,是有意义的

# 博学谷IT 技术支持

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值