- 博客(1)
- 资源 (4)
- 收藏
- 关注
原创 Hadoop的shuffle过程
Hadoop的shuffle过程就是从map端输出到reduce端输入之间的过程,这一段应该是Hadoop中最核心的部分,因为涉及到Hadoop中最珍贵的网络资源,所以shuffle过程中会有很多可以调节的参数,也有很多策略可以研究。这里没有对shuffle做深入的分析,也没有读源代码,只是根据资料和使用的一些理解。 map端 map过程的输出是写入本地磁盘而不是HDFS,但是一开始数
2015-03-24 15:33:32 867 2
身份认证技术分析论文
认证技术是信息安全中的一个重要内容,在“网络与信息安全”课程中我们学习了两种认证技术:消息认证与身份认证,消息认证用于保证信息的完整性与抗否认性,身份认证则用于鉴别用户身份。
2011-04-23
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人