近日闲来无事,刚好翻到一个Hadoop的软文,由于自己也是技术出身,一时手痒就想在自己的机子上部署一下。百度了半天,大部分部署的稿子都是提示让大家下载cywin,然后在安装hadoop,感觉很莫名奇妙,也没看懂。找了几篇直接部署的博文,看了下大有收获,今天把操作过程记录下来,免得忘了。
一、环境
windows 7 64bit
jdk 1.8.144
hadoop 2.7.4
二、操作步骤
1、下载并安装jdk,废话不多说了,百度去吧,记得设置好JAVA_HOME系统环境变量,因为hadoop的配置文件中用到了这个参数。
2、下载并解压hadoop-2.7.4.tar.gz文件包,我是在官网下载的,解压后会提示报错说有两个.so的文件没法创建链接,不用管直接干。我解压在了d:\下,创建HADOOP_HOME环境变量,志向你解压的hadoop文件,我的是D:\hadoop-2.7.4,文件夹下就是hadoop所有的文件了
3、下载window下适应的包,包含了hadoop.dll和winutils。这个比较难找,我方在百度云盘里了http://pan.baidu.com/s/1jHVuaxg。下载解压后全部拷贝到hadoop解压后对应的bin文件夹。
4、配置hadoop的三个XML文件,我的路径为D:\hadoop-2.7.4\etc目录下
1)core-site.xml ,刚开始里没有啥内容,直接复制如下代码
<?xml version="1.0" encoding="UT