hadoop安装和使用

1.第一步下载软件
下载hadoop软件http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.7.0/

2.第二步配置jdk环境
export JAVA_HOME=/usr/local/jdk1.8.0_171
export PATH=$PATH:${JAVA_HOME}/bin

3.第三步机器参数设置
hostname：hadoop
修改机器名：/etc/sysconfig/network
NETWORKING=yes
HASTNAME=hadoop
设置ip和hostname映射关系 /etc/hosts
127.0.0.1 hadoop

ssh 免密登录
ssh-keygen -t rsa
cp ~/.ssh/rsa.pub ~/.ssh/authorized_keys

4.第四步修改配置文件
修改 ~/app/hadoop-2.6.0-cdh5.7.0/etc/hadoop

• hadoop-env.sh
  export JAVA_HOME=/usr/local/jdk1.8.0_171
• core-site.xml

    <configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://localhost:8020</value>
     </property>
  <property>
        <name>hadoop.tmp.dir</name>
        <value>/root/tmp/</value>
    </property>
</configuration>

 hdfs-site.xml

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>

</configuration>

5.第五步格式化hdfs
（注意：如果hdfs有数据，将被清空）

bin/hdfs namenode -format

6.第六步启动HDFS

sbin/start-dfs.sh
查看hdfs http://localhost:50070/

7.简单的hdfs操作

腾讯云618云聚惠活动开始了
1核2G1M 95元/年，288元/3年
2核8G5M 1688元/3年(推荐购买)
4核8G5M 1999元/3年(推荐购买)
https://url.cn/BNDNru5Y
老用户换QQ登陆，可以买多台