(hadoop02)配置hadoop--伪分布式

1.standlone(local)

不需要配置就能用

 

2.Pseudodistributed mode（伪分布模式）

a)cd /soft/hadoop/etc/hadoop

b)编辑core-site.xml
            <?xml version="1.0"?>
            <configuration>
                <property>
                    <name>fs.defaultFS</name>
                    <value>hdfs://localhost/</value>
                </property>
            </configuration>
  c)编辑hdfs-site.xml
            <?xml version="1.0"?>
            <configuration>
                <property>
                    <name>dfs.replication</name>
                    <value>1</value>
                </property>
            </configuration>
  d)编辑mapred-site.xml
            注意:cp mapred-site.xml.template mapred-site.xml
            <?xml version="1.0"?>
            <configuration>
                <property>
                    <name>mapreduce.framework.name</name>
                    <value>yarn</value>
                </property>
            </configuration>
  e)编辑yarn-site.xml
            <?xml version="1.0"?>
            <configuration>
                <property>
                    <name>yarn.resourcemanager.hostname</name>
                    <value>localhost</value>
                </property>
                <property>
                    <name>yarn.nodemanager.aux-services</name>
                    <value>mapreduce_shuffle</value>
                </property>
            </configuration>

  f)配置SSH
            1)检查是否安装了ssh相关软件包(openssh-server + openssh-clients + openssh)
                $yum list installed | grep ssh

            没有安装ssh，安装ssh

            yum install openssh-server

            2)检查是否启动了sshd进程
                $>ps -Af | grep sshd
            
            3)在client侧生成公私秘钥对。(以下命令在centos7.5上会提示参数过长)
                $>ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa

              修改后：

             $>ssh-keygen -t rsa -f ~/.ssh/id_rsa

             一路回车到底
            
            4)生成~/.ssh文件夹，里面有id_rsa(私钥) + id_rsa.pub(公钥)

            5)追加公钥到~/.ssh/authorized_keys文件中(文件名、位置固定)
                $>cd ~/.ssh
                $>cat id_rsa.pub >> authorized_keys
            
            6)修改authorized_keys的权限为644.( 注：权限不为644，每次ssh登陆都要输入密码)
                $>chmod 644 authorized_keys
            
            7)测试
                $>ssh localhost