windows下部署Hadoop2.7.4

本文档记录了在Windows 7 64位系统上部署Hadoop 2.7.4的详细步骤,包括安装JDK,配置Hadoop环境变量,解决.so文件链接问题,配置core-site.xml、hdfs-site.xml和mapred-site.xml文件,以及启动和验证Hadoop集群的过程。
摘要由CSDN通过智能技术生成

近日闲来无事,刚好翻到一个Hadoop的软文,由于自己也是技术出身,一时手痒就想在自己的机子上部署一下。百度了半天,大部分部署的稿子都是提示让大家下载cywin,然后在安装hadoop,感觉很莫名奇妙,也没看懂。找了几篇直接部署的博文,看了下大有收获,今天把操作过程记录下来,免得忘了。

   一、环境

     windows 7  64bit

    jdk  1.8.144

   hadoop  2.7.4


 二、操作步骤

   1、下载并安装jdk,废话不多说了,百度去吧,记得设置好JAVA_HOME系统环境变量,因为hadoop的配置文件中用到了这个参数。

   2、下载并解压hadoop-2.7.4.tar.gz文件包,我是在官网下载的,解压后会提示报错说有两个.so的文件没法创建链接,不用管直接干。我解压在了d:\下,创建HADOOP_HOME环境变量,志向你解压的hadoop文件,我的是D:\hadoop-2.7.4,文件夹下就是hadoop所有的文件了

   3、下载window下适应的包,包含了hadoop.dll和winutils。这个比较难找,我方在百度云盘里了http://pan.baidu.com/s/1jHVuaxg。下载解压后全部拷贝到hadoop解压后对应的bin文件夹。

   4、配置hadoop的三个XML文件,我的路径为D:\hadoop-2.7.4\etc目录下

  1)core-site.xml ,刚开始里没有啥内容,直接复制如下代码

<?xml version="1.0" encoding="UT

评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值