- 博客(4)
- 资源 (12)
- 收藏
- 关注
RSS订阅原创 Skew Join与Left Semi Join相关
Skew Join真实数据中数据倾斜是一定的, hadoop 中默认是使用hive.exec.reducers.bytes.per.reducer = 1000000000也就是每个节点的reduce 默认是处理1G大小的数据，如果你的join 操作也产生了数据倾斜，那么你可以在hive 中设定set hive.optimize.skewjoin =
2013-08-02 10:21:32
3151
原创 hive 桶相关特性分析
桶(bucket)是指将表或分区中指定列的值为key进行hash，hash到指定的桶中，这样可以支持高效采样工作。 抽样（sampling）可以在全体数据上进行采样，这样效率自然就低，它还是要去访问所有数据。而如果一个表已经对某一列制作了bucket，就可以采样所有桶中指定序号的某个桶，这就减少了访问量。
2013-08-02 09:44:39
7032
2
转载 渠道商用假量冒充真实用户：开发者求给条活路
说明：之前在《[转载] 在线广告作弊手段一览》和《[转载]Facebook广告陷入信任危机：虚假点击泛滥》两篇文章中，我们介绍了Web媒体如何作弊和识别广告点击作弊的方法，那在移动互联网中是否存在作弊呢？答案显而易见。本文的作者就为我们描写了是如何识别APP付费推广作弊的。同样，我们重点来学习作者的分析思路。原文链接是：http://www.leiphone.com/0731-utlee-app-
2013-08-01 14:40:57
1892
车辆管理系统毕业设计范例.doc
2010-04-08
Delphi 深度编程及其项目应用开发
2010-04-08
高质量C语言编程指南
2010-04-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人