Hadoop伪分布式安装

Hadoop伪分布式安装

首先需要安装Hadoop环境，可以参考这篇文章

配置ssh登陆，参考这篇文章

首先修改core-site.xml文件
先进入hadoop目录！！！
输入

cd etc/hadoop
sudo vi core-site.xml

在configuration标签内加上

<property>
	<name>fs.defaultFS</name>
	<value>hdfs://localhost:9000</value>
</property>
<property>
	<name>hadoop.tmp.dir</name>
	<value>/root/hadoop/tmp</value>				//这个地址的文件夹是你自定义的，不一定要和我一样
</property>

然后按下esc，输入:wq退出

再来配置hdfs-site.xml,输入

sudo vi hdfs-site.xml

同样在configuration标签内插入

	<property>
		<name>dfs.replication</name>
		<value>1</value>
	</property>
	<property>
		<name>dfs.namenode.name.dir</name>
		<value>file:/root/hadoop/tmp/dfs/name</value>
	</property>
	<property>
		<name>dfs.datanode.data.dir</name>
		<value>file:/root/hadoop/tmp/dfs/data</value>
	</property>

然后按下esc，输入:wq退出

配置root用户启动dfs服务，在sbin目录中
start-dfs.sh,stop-dfs.sh这两个文件最前面加上

HDFS_DATANODE_USER=root
HADOOP_SECURE_DN_USER=hdfs
HDFS_NAMENODE_USER=root
HDFS_SECONDARYNAMENODE_USER=root

然后按下esc，输入:wq退出
start-yarn.sh,stop-yarn.sh两个文件最前面加上

YARN_RESOURCEMANAGER_USER=root
HADOOP_SECURE_DN_USER=yarn
YARN_NODEMANAGER_USER=root

然后按下esc，输入:wq退出

然后输入

./bin/hdfs namenode -format

再输入

./sbin/start-dfs.sh

启动服务

输入

jps

会出现这些进程

在浏览器中输入localhost:9870访问

输入

./sbin/stop-dfs.sh

停止服务