学员经验
北邮大数据
这个作者很懒,什么都没留下…
展开
-
在Eclipse上运行Hadoop程序,DistributedCache找不到文件缓存的问题
2014期李海波同学作品 【原文链接】前一段时间在网上找了一个K-means算法的分布式实现,里面涉及到分布式缓存DistributedCache的问题,我在eclipse中运行MapReduce程序,运行后在命令窗口中明明显示分布式缓存已经建立,但是程序就是读取不到文件,网上各种查找方法,没有解决。后面我采用一种折中的办法,就是在每个Map或者Reduce中采用FileS转载 2014-04-06 22:16:01 · 2508 阅读 · 0 评论 -
Wordcount Combiner性能测试
在mapreduce程序的运行过程中,map阶段产生的数据存放在本地磁盘中,reduce阶段节点通过远程访问的形式读取进行下一步计算。如果能够减少map阶段产生的数据量就能够大幅度提升体统性能。Combiner是减少map阶段产生数据量的重要措施。本文档重点研究了combiner函数对于wordcount程序运行时间的影响。本文档的研究方法是:在运行wordcount程序过程中,针原创 2014-04-06 22:20:28 · 1377 阅读 · 0 评论 -
2014期同学参观北邮宽带网络监控教研中心
大家参观了Hadoop机房,听张燕申、凌艳、常月、尹劲松同学分别讲解了原创 2014-05-28 22:06:05 · 1450 阅读 · 0 评论 -
2014年大数据处理课程设计演讲
下面是部分同学讲解课程设计的风采原创 2014-06-19 14:49:16 · 1751 阅读 · 0 评论 -
手机用户操作系统喜好分析
实验室学生周游和张艳婷同学的作品,分析了手机用对不同操作系统的喜好和换机时的倾向,赞!原创 2014-12-15 22:16:03 · 1427 阅读 · 0 评论