hadoop2.7之伪分布模式

进入${HADOOP_HOME}/etc/hadoop目录 （ ${HADOOP_HOME}为hadoop的环境变量路径）

1 编辑core-site.xml

<?xml version="1.0"?>
			<configuration>
				<property>
					<name>fs.defaultFS</name>
					<value>hdfs://localhost/</value>
				</property>
			</configuration>

2 编辑hdfs-site.xml

<?xml version="1.0"?>
			<configuration>
				<property>
					<name>dfs.replication</name>
					<value>1</value>
				</property>
			</configuration>

3 编辑mapred-site.xml

		注意:cp mapred-site.xml.template mapred-site.xml
		<?xml version="1.0"?>
		<configuration>
			<property>
				<name>mapreduce.framework.name</name>
				<value>yarn</value>
			</property>
		</configuration>

4 编辑yarn-site.xml

		<?xml version="1.0"?>
		<configuration>
			<property>
				<name>yarn.resourcemanager.hostname</name>
				<value>localhost</value>
			</property>
			<property>
				<name>yarn.nodemanager.aux-services</name>
				<value>mapreduce_shuffle</value>
			</property>
		</configuration>

5 对hdfs进行格式化

进入hadoop 的安装目录的bin目录下 ，我的安装目录为：/soft/hadoop

	cd soft/hadoop/bin
	
	hadoop namenode -format

6.修改hadoop配置文件，手动指定JAVA_HOME环境变量

	[${hadoop_home}/etc/hadoop/hadoop-env.sh]

	export JAVA_HOME=/soft/jdk

7.启动hadoop的所有进程

	start-all.sh 或者 start-dfs.sh  ,start-yarn.sh --推荐使用后面两个命令启动

8 .启动完成后，出现以下进程

	jps
		NameNode
		DataNode
		SecondaryNameNode
		ResourceManager
		NodeManager

9.查看hdfs文件系统

hdfs dfs -ls /

10.创建目录

	hdfs dfs -mkdir -p /user/centos/hadoop

11 .通过webui查看hadoop的文件系统

	192.168.1.38:50070/ --192.168.1.38 是我的hadoop服务器ip

12.停止hadoop所有进程

stop-all.sh

hadoop的端口说明

50070 //namenode http port
50075 //datanode http port
50090 //2namenode http port
8020 //namenode rpc port
50010 //datanode rpc port

启动脚本
1.start-all.sh //启动所有进程
2.stop-all.sh //停止所有进程
3.start-dfs.sh //
4.start-yarn.sh

[hdfs] start-dfs.sh stop-dfs.sh
NN
DN
2NN

[yarn] start-yarn.sh stop-yarn.sh
RM
NM