Hadoop测试(在cygwin+window环境下)

 Hadoop测试

1/安装cygwin

2/下载hadoop

3/配置ssh(参看Cygwin + OpenSSH FOR Windows的安装配置CygWin：一个将Linux自由软件带入Windows中应用的绝佳工具,网址:http://bbs.wuyou.com/viewthread.php?tid=119296&extra=page%3D6)

4/设置环境变量(cygwin/bin放到path环境变量中,新建JAVA_HOME环境变量)

5测试WordCount例子,可看到以下两种方式的运行情况

单机(非分布式)模式

伪分布式运行模式

 

参考网址

1/Cygwin + OpenSSH FOR Windows的安装配置CygWin：一个将Linux自由软件带入Windows中应用的绝佳工具(http://bbs.wuyou.com/viewthread.php?tid=119296&extra=page%3D6)

2/Hadoop学习笔记 http://blog.csdn.net/heiyeshuwu/archive/2007/09/09/1778193.aspx

3/用 Hadoop 进行分布式并行编程, 第 1 部分http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop1/index.html

4/用 Hadoop 进行分布式并行编程, 第 2 部分

http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop2/index.html#download