hadoop报错笔记

使用hdfs查看根路径时报错：java.net.UnknownHostException:ns

通过检查配置文件都没问题

原因：没有配置访问代理类默认是mycluster如果集群名词设置的是mycluster可以不设置

解决：添加如下配置文件

<property>
<name>dfs.client.failover.proxy.provider.ns</name>
<value>org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider</value>
</property>

如果不开yarn这需要使用hdfs dfs 命令

 

输入start-all.sh 的时候namenode起动一会儿就挂了，在core-site.xml加上如下代码段

<!--修改core-site.xml中的ipc参数,防止出现连接journalnode服务ConnectException-->
    <property>
        <name>ipc.client.connect.max.retries</name>
        <value>100</value>
    </property>
    <property>
        <name>ipc.client.connect.retry.interval</name>
        <value>10000</value>
    </property>