windows下重装hadoop笔记

本文详细记录了在Windows XP 64位系统下安装Hadoop的步骤,包括JDK、Ant、Cygwin和Eclipse的安装配置,以及Hadoop的下载、解压、配置和启动过程。在安装过程中遇到了SSH服务启动、文件路径配置等问题,并给出了相应的解决方案。
摘要由CSDN通过智能技术生成
操作系统windowsXP64位系统
1.JDK的安装
下载并安装jdk-8u5-windows-x64.exe在D:\hadoop\Java\
添加环境变量"系统变量"设置JAVA_HOME为D:\hadoop\Java\jdk1.8.0_05
添加环境变量"系统变量"设置CLASSPATH为,;%JAVA_HOME%/lib/dt.jar;%JAVA_HOME%/lib/tools.jar;
配置PATH,因为不知道是配置Administrator的用户变量PATH还是配置系统变量Path,但是Administrator中的PATH内容为%WPS_HOME%  感觉不是特别有关系,所以只配置了 系统变量 中的 Path。
添加环境变量"系统变量"设置在Path后添加%JAVA_HOME%/bin;%JAVA_HOME%/jre/bin
在DOS窗口中输入java -version验证是否安装成功
2.Ant的安装
下载并安装apache-ant-1.9.4-bin.zip在D:\hadoop\
添加环境变量"系统变量"设置ANT_HOME为D:\hadoop\apache-ant-1.9.4
同时在环境变量PATH后面添加;%ANT_HOME%\bin
在DOS窗口中输入ant -version验证是否安装成功
3.Cygwin的安装
双击Cygin的安装包setup-x86_64.exe,书上说一直点击下一步,但是这里出现一点问题:关于设置Root Directory和Local Package Directory,
按网站http://residence.educities.edu.tw/forster/articles/cygwin.html
说的为参考。
Root Directory设置为d:\hadoop\cygwin
Local Package Directory设置为C:\tmp\Cygwin
出现Select Packages窗口
选中net中的6.6.1p1-3(openssh)和1.0.1g-1(openssl)
输入ssh-host-config安装并启动sshd服务
输入net start sshd启动sshd服务
这里输入“net start sshd”出现问题:
System error 3 has occurred.


The system cannot find the path specified.
这里出现错误
4.Eclipse的安装
直接将下载的压缩包直接解压到D:\hadoop\下


hadoop下载
将下载的hadoop-1.2.1.tar.gz解压缩到D:\hadoop\下


至此,除了Cygwin中的一个错误,已完成大部分的工作
D:\hadoop\下一共有五个文件夹:
apache-ant-1.9.4
cygwin
eclipse
Java
hadoop-1.2.1
但其实hadoop源代码压缩包不是解压缩到D:\hadoop\中的
要求将hadoop-1.2.1.tar.gz解压缩到Cygwin安装目录的home/${USER}文件夹下,于是
我将hadoop-1.2.1剪切到D:\hadoop\cygwin\home\Administrator\ 中
设置eclipse的workspace为D:\hadoop\workspace
new project:
Project Name:hadoop-1.2.1
Location:D:\hadoop\cygwin\home\Administrator\hadoop-1.2.1(hadoop安装目录的位置)
hadoop初体验
步骤1 修改hadoop配置文件。在conf配置文件下,
修改mapred-site.xml文件,在<configuration></configuration>之间添加以下内容:
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
修改core-site.xml文件,在<configuration></configuration>之间添加以下内容:
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
修改hdfs-site.xml文件,在<configuration></configuration>之间添加以下内容:
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name&
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值