阿里云主机搭建Hadoop伪分布,支持windows上上传文件

问题产生

1.我是使用阿里云的公网ip搭建,NameNode搭建不起来
2.查看logs中的namenode日志,日志上让我去confluence中查看
3.个人感觉是下图红色标注的问题
在这里插入图片描述
4.总结就是说,云服务器Hadoop伪分布式就别用公网ip了。

使用内网ip搭建Hadoop伪分布

我省略ssh,hadoop包的下载解压。

1.修改hosts 文件

将主机名映射到 内网ip
在这里插入图片描述

2.修改Hadoop的core-site.xml

在这里插入图片描述

3.修改Hadoop的hdfs-site.xml

在这里插入图片描述

4.修改slaves

在这里插入图片描述

5.格式化namenode并启动hdfs即可

hdfs namenode -format
start-dfs.sh

6.来到你的windows,(阿里控制台中把50070,50075,50010开放)

在这里插入图片描述
1.发现Datanodes中的node和http中的地址都有主机名 gaoxi
2.此时我们尝试上传。走
在这里插入图片描述
3.结果就是上传不上去,咱们打开network
在这里插入图片描述
访问的是 gaoxi 这个地址
所以

7.在自己的windows下配置hosts,云主机公网ip:gaoxi(主机名)

在这里插入图片描述

1.再走一个
在这里插入图片描述

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值