linux下运行hadoop,Linux环境下hadoop运行平台的搭建

1、hadoop版本认识

截至目前(2012年12月23日)，Apache Hadoop版本分为两代，我们将第一代Hadoop称为Hadoop 1.0，第二代Hadoop称为Hadoop 2.0。第一代Hadoop包含三个大版本，分别是0.20.x，0.21.x和0.22.x，其中，0.20.x最后演化成1.0.x，变成了稳定版，而0.21.x和0.22.x 则支持NameNode HA等新的重大特性。第二代Hadoop包含两个版本，分别是0.23.x和2.x，它们完全不同于Hadoop 1.0，是一套全新的架构，均包含HDFS Federation和YARN两个系统，相比于0.23.x，2.x增加了NameNode HA和Wire-compatibility两个重大特性。

1版本：主要基于原来的技术的升级和发展，同时支持其它技术的支持。如果想用hbase、hive等技术就只有选择版本1。

2版本：主要基于新技术的推广发展，如果只是基于hadoop开发，这个是一个很好的选择。

2、hadoop-1.2.1软件包的认识

bin目录：包含进行hadoop配置、运行以及管理的命

令集合。

conf目录：包含配置和运行hadoop环境需要的配置文

件以及示例文件集合。

hadoop-examples-1.2.1.jar

3、Linux环境下安装Hadoop的前提准备(Ubuntu12.04)

(1)安装Java的JDK

软件包为：jdk-7u45-linux-x64.gz

这里采用的解压直接配置的方式进行安装，除此之外还有二进制安装方式

<1> 解压并分解软件包(用tar将解压后的单一文件进行分解)

<2> 配置Java环境变量，主要JA V A_HOME、PA TH、CLASSPA TH三个环境变量

在/etc/profile文件添加以下语句