Hadoop单机模式调试很方便,现将配置过程作一描述:
环境准备:
JAVA环境要调试安装正常,可以在命令行执行java -version 查看结果,能正常显示版本即可。
java环境变量配置示例如下:
export JAVA_HOME=/home/$USER/jdk1.7
export JRE_HOME=/home/$USER/jdk1.7
export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH:$HOME/bin
Hadoop安装配置:
1、首先在hadoop官网下载最新版本。这里以下载的hadoop-1.0.0.tar.gz 为例
2、将hadoop-1.0.0.tar.gz解压到指定目录。
3、配置hadoop环境变量,详细配置如下:
export HADOOP_HOME=/home/$USER/hadoop
export PATH=$HADOOP_HOME/bin:$PATH
4、配置hadoop/conf/core-site.xml 添加
<property> <name>fs.default.name</name> <value>hdfs://localhost:9000</value> </property>
5、配置hadoop/conf/mapred-site.xml 添加
<property> <name>mapred.job.tracker</name> <value>localhost:9001</value> </property>
6、配置hadoop/conf/hadoop-env.sh 添加
export JAVA_HOME=/home/$USER/jdk1.7
还有一个重要的文件hdfs-site.xml,这里只有分布式模式才需要配置,此处可以忽略。
以上完成后在命令行执行start-all.sh启动haoop服务。
运行jps查看进程:
如显示以下内容:
7480 SecondaryNameNode
7553 JobTracker
7926 Jps
7259 NameNode
7660 TaskTracker
7369 DataNode
则说明单机模式hadoop配置成功。