hadoop单机配置搭建

1.配置主机名
$vim /etc/sysconfig/network
$source /etc/sysconfig/network
例如：
NETWORKING=yes
HOSTNAME=hadoop1
2.配置本机密码
ssh-keygen -t rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
3.配置Hosts
vi /etc/hosts
填入以下内容
127.0.0.1 hadoop1
其他主机和ip对应信息。。。
4.解压jar包修改配置文件
cd etc/hadoop
(1)修改 hadoop-env.sh
通过vim打开
vim [hadoop]/etc/hadoop/hadoop-env.sh
主要是修改java_home的路径
在hadoop-env.sh的第27行,把export JAVA_HOME=${JAVA_HOME}修改成具体的路径export JAVA_HOME=/home/software/jdk1.8
  export HADOOP_CONF_DIR=${HADOOP_CONF_DIR:-"/home/hadoop-2.7.1/etc/hadoop/"}
重新加载使修改生效
source hadoop-env.sh
(2)修改 core-site.xml
通过vim打开
vim [hadoop]/etc/hadoop/core-site.xml
增加namenode配置、文件存储位置配置
<configuration>
       <property>
        <!--用来指定hdfs的老大，namenode的地址-->
               <name>fs.defaultFS</name>
               <value>hdfs://spark1:9000</value>
       </property>
       <property>
(3)修改 hdfs-site.xml
通过vim打开
vim [hadoop]/etc/hadoop/hdfs-site.xml
配置包括自身在内的备份副本数量。
<configuration>
       <property>
        <!--指定hdfs保存数据副本的数量，包括自己，默认为3-->
        <!--伪分布式模式，此值必须为1-->
               <name>dfs.replication</name> 
               <value>1</value>
       </property>
</configuration>
(4)修改 mapred-site.xml
说明：在/etc/hadoop的目录下，只有一个mapred-site.xml.template文件，复制一个
cp mapred-site.xml.template mapred-site.xml
通过vim打开
vim [hadoop]/etc/hadoop/mapred-site.xml
配置mapreduce运行在yarn上
<configuration>
       <property>  
        <!--指定mapreduce运行在yarn上-->
               <name>mapreduce.framework.name</name>
               <value>yarn</value>
       </property>
</configuration>


(4).启动hadoop
在sbin目录下
$start-all.sh