Hadoop Windows环境下安装

打包好的已配置好的hadoop  我这里用的是2.6.5 其中包括重要的几个dll文件是hadoop不自带的。

链接:https://pan.baidu.com/s/1Mct3sLTyXFuO3G8slafrKA 密码:4sf1


配置到环境变:

环境变量HADOOP_HOME中是安装的路径,在PATH里加上%HADOOP_HOME%\bin;下载相关工具类,直接解压后把文件丢到E:\hadoop-2.6.5\bin目录中去,将其中的hadoop.dll在c:/windows/System32下也丢一份;





用记事本打开 hadoop2.6.5\etc\hadoop\hadoop-env.cmd文件,修改JAVA_HOME为你自己jdk路径。注意:如果你的JDK安装在Program Files目录下,名称用\PROGRA~1\Java 否则中间的空格可能会识别失败。



windows下安装并启动hadoop2.6.5

  64位windows安装hadoop没必要倒腾Cygwin,直接解压官网下载hadoop安装包到本地->最小化配置4个基本文件->执行1条启动命令->完事。一个前提是你的电脑上已经安装了jdk,设置了java环境变量。下面把这几步细化贴出来,以hadoop2.6.5为例


  1、下载hadoop安装包就不细说了:http://hadoop.apache.org/->左边点Releases->点mirror site->点http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common->下载hadoop-2.6.5.tar.gz;


  2、解压也不细说了:复制到E盘根目录直接解压,出来一个目录E:\hadoop-2.6.5


       3、去E:\hadoop-2.6.5\etc\hadoop找到下面4个文件并按如下最小配置粘贴上去:

core-site.xml



[html]  view plain  copy
  1. <configuration>  
  2.     <property>  
  3.         <name>fs.defaultFS</name>  
  4.         <value>hdfs://localhost:9000</value>  
  5.     </property>      
  6. </configuration>  

hdfs-site.xml


[html]  view plain  copy
  1. <configuration>  
  2.     <property>  
  3.         <name>dfs.replication</name>  
  4.         <value>1</value>  
  5.     </property>  
  6.     <property>      
  7.         <name>dfs.namenode.name.dir</name>      
  8.         <value>file:/hadoop/data/dfs/namenode</value>      
  9.     </property>      
  10.     <property>      
  11.         <name>dfs.datanode.data.dir</name>      
  12.         <value>file:/hadoop/data/dfs/datanode</value>    
  13.     </property>  
  14. </configuration>  



mapred-site.xml


[html]  view plain  copy
  1. <configuration>  
  2.     <property>  
  3.         <name>mapreduce.framework.name</name>  
  4.         <value>yarn</value>  
  5.     </property>  
  6. </configuration>  

yarn-site.xml


[html]  view plain  copy
  1. <configuration>  
  2.     <property>  
  3.         <name>yarn.nodemanager.aux-services</name>  
  4.         <value>mapreduce_shuffle</value>  
  5.     </property>  
  6.     <property>  
  7.         <name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>  
  8.         <value>org.apache.hadoop.mapred.ShuffleHandler</value>  
  9.     </property>  
  10. </configuration>  


4、启动windows命令行窗口,进入hadoop-2.6.5\bin目录,执行下面2条命令,先格式化namenode再启动hadoop



E:\hadoop-2.6.5\bin>hadoop namenode -format




E:\hadoop-2.6.5\bin>cd ..\sbin


E:\hadoop-2.6.5\sbin>start-all.cmd
This script is Deprecated. Instead use start-dfs.cmd and start-yarn.cmd
starting yarn daemons


E:\hadoop-2.6.5\sbin>jps
4944 DataNode
5860 NodeManager
3532 Jps
7852 NameNode
7932 ResourceManager




评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值