Hadoop单机版

安装单机版 Hadoop 系统

一、配置 Hadoop 配置文件

进入 Hadoop 目录

[root@master ~]# cd /usr/local/src/hadoop/

[root@master hadoop]# ls
bin  include  libexec      NOTICE.txt  sbin
etc  lib      LICENSE.txt  README.txt  share

配置 hadoop-env.sh 文件

[root@master hadoop]# vi etc/hadoop/hadoop-env.sh 

在文件中查找 export JAVA_HOME ，并改成如下内容

export JAVA_HOME=/usr/local/src/jdk    //按Esc键，再输入 /号键

二、测试 Hadoop 本地模式的运行

步骤一: 切换到 hadoop 用户

[root@master hadoop]# su - hadoop 

步骤二: 创建输入数据存放目录

[hadoop@master ~]$ mkdir ~/input

步骤三: 创建数据输入文件

[hadoop@master ~]$ vi ~/input/data.txt

写入以下内容：

Hello World
Hello Hadoop
Hello Huasan

步骤四: 测试 MapReduce 运行

[hadoop@master ~]$ hadoop jar /usr/local/src/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.1.jar wordcount ~/input/data.txt ~/output

[hadoop@master ~]$ ll ~/output/
total 4
-rw-r--r-- 1 hadoop hadoop 34 Jul  6 22:12 part-r-00000
-rw-r--r-- 1 hadoop hadoop  0 Jul  6 22:12 _SUCCESS

[hadoop@master ~]$ cat ~/output/part-r-00000 
Hadoop  1
Hello   3
Huasan  1
World   1