- 博客(1)
- 资源 (4)
- 收藏
- 关注
转载 Hadoop MapReduce 减小数据倾斜的性能损失
Reduce数据倾斜一般是指map的输出数据中存在数据频率倾斜的状况,也就是部分输出键的数据量远远大于其它的输出键。 问题 需要减小reduce端数据倾斜的性能损失。 讨论 用一系列的方法减小数据倾斜的风险,例如使用自定义的分区器,使用map端连接等。 方案 在这个方案中将讨论多个减轻reduce数据倾斜的性能损失的方法。 方法1:抽样和范围分
2014-07-28 15:44:02 1577
身份认证技术分析论文
认证技术是信息安全中的一个重要内容,在“网络与信息安全”课程中我们学习了两种认证技术:消息认证与身份认证,消息认证用于保证信息的完整性与抗否认性,身份认证则用于鉴别用户身份。
2011-04-23
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人