HDFS报错之-无法解析主机

        Configuration conf = new Configuration();

        conf.set("dfs.client.use.datanode.hostname","true");
        FileSystem fileSystem = FileSystem.get(new URI("hdfs://xxx:9000/"),conf,"root");

        Path src = new Path("C:\\Users\\Administrator\\Downloads\\idman633.exe");

        Path path = new Path("hdfs://xxx:9000/name");

        fileSystem.copyFromLocalFile(src,path);

        fileSystem.close();
    } 

就是这样运行的时候报错

log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory).
log4j:WARN Please initialize the log4j system properly.
log4j:WARN See http://logging.apache.org/log4j/1.2/faq.html#noconfig for more info.

java.io.IOException: java.nio.channels.UnresolvedAddressException

at org.apache.hadoop.hdfs.DataStreamer$LastExceptionInStreamer.set(DataStreamer.java:299)
at org.apache.hadoop.hdfs.DataStreamer.run(DataStreamer.java:820)
Caused by: java.nio.channels.UnresolvedAddressException
at sun.nio.ch.Net.checkAddress(Net.java:101)
at sun.nio.ch.SocketChannelImpl.connect(SocketChannelImpl.java:622)
at org.apache.hadoop.net.SocketIOWithTimeout.connect(SocketIOWithTimeout.java:192)
at org.apache.hadoop.net.NetUtils.connect(NetUtils.java:531)
at org.apache.hadoop.hdfs.DataStreamer.createSocketForPipeline(DataStreamer.java:259)
at org.apache.hadoop.hdfs.DataStreamer.createBlockOutputStream(DataStreamer.java:1692)
at org.apache.hadoop.hdfs.DataStreamer.nextBlockOutputStream(DataStreamer.java:1648)
at org.apache.hadoop.hdfs.DataStreamer.run(DataStreamer.java:704)


Process finished with exit code -1

搞了很久问了好多人,最后远程解决了,不是因为防火墙原因,

也不是hadoop配置错了,原因是在使用云服务器,需要在windwos建立域名映射


129.xxx.xxx.xxx  bigdata

就这样解决了,真的很坑,我最烦配置了 

另外在与远程主机通信时候需要设置多设置一个参数

 

总之大数据坑还是很多 加油!

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值