Hadoop（伪分布搭建）

步骤

1、切换到Hadoop下面的etc

切换命令：cd /opt/module/hadoop-3.1.3/etc/hadoop/

用 ll查看，下图标注的是需要配置的文件

 2、下面将对这四个文件进行配置

（1）core-site.xml 

命令：vi core-site.xml

进入后 将<configuration>中的文件删掉替换成如下内容后退出

    <property>

        <name>fs.defaultFS</name>

        <value>hdfs://hadoop100:9820</value>

</property>

    <property>

        <name>hadoop.data.dir</name>

        <value>/opt/module/hadoop-3.1.3/data</value>

    </property>

（2）、hdfs-site.xml

命令：vi hdfs-site.xml

进入后 将<configuration>中的文件删掉替换成如下内容后退出

 进入后 将<configuration>中的文件删掉替换成如下内容后退出

<configuration>
<!-- 指定HDFS副本的数量 -->
<property>
        <name>dfs.replication</name>
        <value>1</value>
</property>
</configuration>

（3）、yarn-site.xml

命令：vi yarn-site.xml

进入后 将<configuration>中的文件删掉替换成如下内容后退出

<property>

        <name>yarn.nodemanager.aux-services</name>

        <value>mapreduce_shuffle</value>

    </property>

    <property>

        <name>yarn.resourcemanager.hostname</name>

        <value>hadoop101</value>

    </property>

    <property>

        <name>yarn.nodemanager.env-whitelist</name>

        <value>JAVA_HOME,HADOOP_COMMON_HOME,HADOOP_HDFS_HOME,HADOOP_CONF_DIR,CLASSPATH_PREPEND_DISTCACHE,HADOOP_YARN_HOME,HADOOP_MAPRED_HOME</value>

    </property>

（4）、mapred-site.xml

命令：vi mapred-site.xml

进入后 将<configuration>中的文件删掉替换成如下内容后退出

 <property>

    <name>mapreduce.framework.name</name>

    <value>yarn</value>

  </property>

3、启动

（1）、格式化namenode（第一次启动时格式）

命令：hdfs namenode –format

（2）、启动启动namenode

命令：hdfs --daemon start namenode

（3）、启动datanode

命令：hdfs--daemon start datanode

（4）、启动resourcemanager

命令：yarn --daemon start resourcemanager

（5）、启动nodemanager

命令： yarn --daemon start nodemanager

4、查看是否启动成功

 

命令：jps

5、杀掉进程

命令：kill