hadoop环境搭建

安装jdk

# 查看java的安装包
yum -y list java* 

#安装openjdk 8
yum -y install java-1.8.0-openjdk*

环境配置

安装完成后，javac java 可正常使用

#备份
mv /etc/profile /etc/profile.bak
#编辑
vim /etc/profile

## openjdk的安装位置在
/usr/lib/jvm

#追加
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk
export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin

#生效
source /etc/profile

配置hadoop

# 下载hadoop
wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz

#解压
tar -zxvf hadoop-1.2.1.tar.gz 

# 进入conf目录配置

vim hadoop-env.sh
export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk

vim core-site.xml
# 添加

<property>
<name>hadoop.tmp.dir</name>
<value>/hadoop</value>
</property>

<property>
<name>dfs.name.dir</name>
<value>/hadoop/name</value>
</property>

<property>
<name>fs.default.name</name>
<value>hdfs://nicholas:9000</value>

vim hdfs-site.xml 

# 添加
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>

vim mapred-site.xml

# 添加
<property>
<name>mapred.job.tracker</name>
<value>nicholas:9001</value>
</property>

# 配置hadoop的环境变量
vim /etc/profile

export PATH=$PATH:$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$PATH
export HADOOP_HOME=/opt/hadoop-1.2.1

格式化结点

hadoop namenode -format

启动查看

start-all.sh