Hadoop伪分布式安装步骤

Hadoop伪分布式安装步骤

版权声明：未经允许，随意转载，请附上本文链接谢谢（づ￣3￣）づ╭❤～
https://blog.csdn.net/xiaoduan_/article/details/79687666
1. JDK安装
解压：# tar -zxvf jdk-7u79-linux-x64.tar.gz -C ~/app
添加到系统环境变量：
# vim ~/.bash_profile
# export JAVA_HOME=/home/hadoop/app/jdk1.7.0_79
# export PATH=$JAVA_HOME/bin:$PATH
使得环境变量生效：# source ~/.bash_profile
验证java是否配置成功： # java -version

1. 安装ssh

   # sudo yum install ssh
# ssh-keygen -t rsa
# cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys

2. 下载并解压hadoop
   下载：直接去cdh官方网站下载
   解压：tar -zxvf hadoop-2.6.0-cdh5.7.0.tar.gz -C ~/app

   1. hadoop配置文件的修改(hadoop_home/etc/hadoop)
      修改 hadoop-env.sh
      export JAVA_HOME=/home/hadoop/app/jdk1.7.0_79

修改 core-site.xml

<property>
            <name>fs.defaultFS</name>
            <value>hdfs://hadoop000:8020</value>
        </property>

        <property>
            <name>hadoop.tmp.dir</name>
            <value>/home/hadoop/app/tmp</value>
        </property>

    hdfs-site.xml
        <property>
            <name>dfs.replication</name>
            <value>1</value>
        </property>

1. 启动hdfs

格式化文件系统（仅第一次执行即可，不要重复执行）：hdfs namenode -format
启动hdfs:sbin/start-dfs.sh
验证是否启动成功：
1. jps
三个进程
DataNode
SecondaryNameNode
NameNode
2. 浏览器访问方式： http://hadoop000:50070

1. 停止hdfs

sbin/stop-dfs.sh