安装Hadoop(2.7.1)_单机模式-CSDN博客

本文介绍了如何在 Ubuntu 14.04 系统上安装 Hadoop 2.7.1，并详细展示了配置 core-site.xml、mapred-site.xml.template 和 hdfs-site.xml 的步骤。此外还提供了运行 Hadoop 的具体命令，包括初始化 HDFS 系统、开启 NameNode 和 DataNode 进程的方法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一,
ubuntu-14.04.3-desktop-amd64(32位的总是报不能识别系统的jvm等错误)
至少1G内存
相关链接
[url]http://www.tuicool.com/articles/bmeUneM[/url]

二,
安装JDK [url]http://fulndon.iteye.com/blog/2276974[/url]
安装ssh和无密码登录
[url]http://blog.csdn.net/hackerwin7/article/details/28109073[/url]

使用shell下载
wget http://mirrors.hust.edu.cn/apache/hadoop/core/stable/hadoop-2.7.1.tar.gz
tar -zxvf hadoop-2.7.1.tar.gz

三,对hadoop2.7.1/etc/hadoop下的相关配置文件进行配置

[color=red]一 core-site.xml [/color]


<configuration>
     <property>
          <name>hadoop.tmp.dir</name>
          <value>file:/home/sijiu/program/hadoop/tmp</value>
          <description>Abase for other temporary directories.</description>
     </property>
     <property>
           <name>fs.defaultFS</name>
           <value>hdfs://localhost:9000</value>
     </property>
</configuration>

[color=red]二 mapred-site.xml.template[/color]


<configuration>
     <property>
           <name>mapred.job.tracker</name>
           <value>localhost:9001</value>
     </property>
</configuration>

[color=red]三 hdfs-site.xml[/color]


<configuration>
      <property>
           <name>dfs.replication</name>
           <value>1</value>
      </property>
      <property>
           <name>dfs.namenode.name.dir</name>
           <value>file:/home/sijiu/program/hadoop/tmp/dfs/name</value>
      </property>
      <property>
           <name>dfs.datanode.data.dir</name>
           <value>file:/home/sijiu/program/hadoop/tmp/dfs/data</value>
      </property>
</configuration>

三, 运行
1.初始化HDFS系统
在hadop2.7.1目录下使用如下命令：
bin/hdfs namenode -format
2.开启 NameNode 和 DataNode 守护进程
使用如下命令开启：
sbin/start-dfs.sh，
[color=red]若启动时报找不到JAVA_HOME的错误,将JAVA_HOME的真实路径替换掉hadoop-env.sh中的${JAVA_HOME}[/color]
3.查看进程信息
使用如下命令查看进程信息
jps，正常可以看到namenode,datanode,secondarynamenode,jps四个进程
[color=red]遇到的问题:查看日志启动正常,但看到的进程不全,解决:重新格式化hdfs,切换到root用户(我曾用root用户启动过)结束hadoop运行[/color]
44.查看Web UI
在浏览器中输入 http://机器ip:50070