- 博客(4)
- 收藏
- 关注
RSS订阅原创 Eclipse下调试Hadoop2.2测试代码
Hadoop2.2已不自带Eclipse Plugin，此时如果在Eclipse上调试word count测试代码，不得不想想别的方法。 最简单的方法，就是将hadoop的所有依赖的jar，做成一个library，供测试调用。步骤如下： 1 下载hadoop 2 新建文件夹 hdlib，将 hadoop2.2/share/hadoop 中所依赖的jar，集中放在hdlib中（包括commo
2013-12-12 10:19:50
622
原创 Hadoop2.2 单机测试程序WordCount
Hadoop wordcount程序是经典的hadoop入门测试程序，主要根据给出一堆文件file1、file2...，统计出file1、file2...中单词出现的次数。 我们在单机上测试运行这个程序，我的测试系统是Mac OS。 1 下载hadoop包，地址：http://www.apache.org/dyn/closer.cgi/hadoop/common/ 2 安装到任意
2013-12-10 08:29:23
571
原创 Hadoop 简介
今天我们正在被数据包围，人们上传视频，更新微博，发网上留言、点击广告等等，这使得机器产生和保存了越来越多的数据，数据的指数级增长给一些大公司带来了新的挑战，Google率先推出了MapReduce，随后一些公司纷纷响应。在数据量剧增的同时，他们更看到了商业上的价值。 Hadoop 与众不同的几点在于： 1 方便：Hadoop运行在由一般商用机器构成的大型集群上，或者如亚马逊弹性云（
2013-12-10 08:27:36
499
原创 WEB APP的性能
自从2011年就开始涉及移动web app的探索，当时HTML5如日中天，很多人都看好，当时还是Android2.3，和iOS4.0，但如当真想作出一款跨平台的产品，又能让用户得到良好的应用体验，似乎不太可能，因为在不同的浏览器上，不同硬件水平下，性能差异实在是太大了。但我足够相信JAVASCRIPT的性能在近几年已经得到了相当大的提升。 可能有人会认为JAVASCRIPT是单线程，但是
2013-12-10 08:25:28
603
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人