Linux系统上Hadoop的配置

目录

1、免密登录

2、设置java安装的根目录

3、hadoop参数配置（hadoop地址配置！）

---

1、免密登录

      ①cd.ssh
      ②ls
      ③ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
      ④ls （多了两个文件 id_rsa、id_rsa.pub）
      ⑤cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
      ⑥cat authorized_keys
      ⑦ssh root@116.63.69.99 ""ls /   （发现不需要密码了！）

2、设置java安装的根目录

        ①cd /usr/app/hadoop-2.9.2/etc/hadoop
        ② vim hadoop-env.sh     （配置文件）
               将JAVA_HOME={$JAVA....}改成（JAVA_HOME=/usr/app/jdk8）

3、hadoop参数配置（hadoop地址配置！）

     ①vim /etc/hosts  （编辑私网ip192.168.0.152   note1）
     ②cd /usr/app/hadoop-2.9.2/etc/hadoop  
     ③vim core-site.xml   （编辑hadoop地址配置文件！）
          末尾加上这些配置！！！！!
            <configuration>
                      <!-- hadoop的地址配置-->
                      <property>
                              <name>fs.defaultFS</name>
                              <value>hdfs://note1:9000</value>
                      </property>
             </configuration>

     ④进入hadoop-2.9.2目录（cd .. 连续两次！然后ls查看！）

                能看到如下文件：

                 bin            etc            include  libexec      NOTICE.txt  sbin
            core-site.xml  hadoop-env.sh  lib      LICENSE.txt  README.txt  share

     ⑤mkdir tmp（在hadoop-2.9.2目录下创建tmp文件夹）
     ⑥vim core-site.xml 
           在之前hadoop文件配置的基础上加上这些配置！！!
                      <!--文件存放路径-->
                      <property>
                                  <name>hadoop.tmp.dir</name>
                                  <value>/usr/app/hadoop-2.9.2/tmp</value>
                      </property>
     ⑥vim hdfs-site.xml
             末尾加上这些配置！！！
             <configuration>
                     <!-- 文件系统默认的副本数-->
                     <property>
                               <name>dfs.replication</name>
                               <value>1</value>
                     </property>

               </configuration>
      ⑦ls tmp/（在hadoop-2.9.2目录下操作该指令）
                 将出现dfs！
      ⑧bin/hdfs namenode -format（格式化：在hadoop-2.9.2目录下操作该指令）
      ⑨sbin/start-dfs.sh（重启）
      ⑩jps
        出现下列东西说明🆗了！！！！！
          2764 SecondaryNameNode
          2604 DataNode
          1149 WrapperSimpleApp
          2877 Jps
          2478 NameNode