Hadoop (2.10.0) 伪分布式配置
配置
配置
Hadoop 的配置文件基本都在 安装目录下 etc/hadoop 目录下
core-site.xml 配置
进入 Hadoop 目录:
# cd /alidata/server/hadoop/hadoop-2.10.0
编辑 core-site.xml 文件:
# vim etc/hadoop/core-site.xml
<configuration>
<!-- 指定 HDFS 中 NameNode 的地址 -->
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
<!-- 指定 Hadoop 运行时产生的文件目录, 默认目录: /tmp/hadoop-${user.name} -->
<property>
<name>hadoop.tmp.dir</name>
<value>/alidata/server/hadoop/hadoop-2.10.0/data/tmp</value>
</property>
</configuration>
hadoop-env.sh 配置
首先查看 JAVA_HOME 环境变量:
# echo $JAVA_HOME
/alidata/server/java/jdk1.8.0_65
编辑 hadoop-env.sh 文件:
# vim etc/hadoop/hadoop-env.sh
# 大约在 25 行.
export JAVA_HOME=${JAVA_HOME} #改为
export JAVA_HOME=/alidata/server/java/jdk1.8.0_65
hdfs-site.xml 配置
编辑 hdfs-site.xml 文件:
# vim etc/hadoop/hdfs-site.xml
<configuration>
<!-- 配置 HDFS 的备份文件数量, 默认数量是3, 伪分布式, 配置1就行 -->
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
格式化HDFS
第一次启动. 可以格式化, 它会帮你检查配置和创建数据文件:
# sh ./bin/hdfs namenode -format
或者使用
# hadoop namenode -format
启动NameNode
启动
# sh hadoop-2.10.0/sbin/hadoop-daemon.sh start namenode
查看是否成功启动:
# jps
启动启动DataNode
启动
# sh hadoop-2.10.0/sbin/hadoop-daemon.sh start datanode
查看是否成功启动:
# jps
访问Hadoop管理平台
#管理平台地址
http://localhost:50070/