hadoop问题整理一

hadoop有俩个管理页面：

http://suibin.online:8088/  

http://suibin.online:50070/

安装完毕，需要查看以下端口是否都存在，否则安装有问题：

netstat -an| grep 50070

netstat -an| grep 50075

netstat -an| grep 50090

netstat -an| grep 8080

netstat -an| grep 9000

端口解释:

(必须存在)  Datanode Address 端口50075，50090

(必须存在）Datanode Address主页端口50070

(必须存在）Namenode Address内核端口9000

配置文件：

/etc/hosts 里添加，suibin.online 是主机名，也可以是域名。总之映射到127.0.0.1本地ip上。

127.0.0.1 suibin.online

etc/hadoop/hdfs-site.xml 里添加如下：第一个表示节点数，1是代表单机版。第二个是配置webhdfs页面入口，域名加端口。

<configuration>
<property>
        <name>dfs.replication</name>
        <value>1</value>
</property>
<property>
        <name>dfs.namenode.http.address</name>
        <value>suibin.online:50070</value>
</property>
</configuration>

etc/hadoop/core-site.xml 里添加如下：第一个代表核心地址API啥的都在这个地址对外开放。第二个是外挂存储。

<configuration>
<property>
   <name>fs.defaultFS</name>
   <value>hdfs://suibin.online:9000</value>
</property>
<property>
        <name>hadoop.tmp.dir</name>
        <value>/home2/data/hddata</value>
</property>
</configuration>