基于 Docker 下 Hadoop(单机和集群)快速安装部署

基于 kaibb/hadoop 镜像快速搭建 Hadoop 集群环境,便于快速开发

一,Master 节点

  1. 拉取镜像
docker pull registry.aliyuncs.com/kaibb/hadoop
  1. 查看镜像是否拉取成功
docker images

镜像列表

  1. 启动镜像
    DFS、YARN 要分别用到 50000、8880端口的映射(这个端口自定义)
    44c31aee79de 为镜像ID
docker run -itd --name hadoop-Master -h Master -p 50070:50070 -p 8088:8088 44c31aee79de /bin/bash
  1. 进入容器
    d9fceab5680c 为镜像ID
docker exec -ti d9fceab5680c /bin/bash
  1. 格式化 namenode
hadoop namenode -format

格式化hadoop

  1. 运行DFS
start-dfs.sh

如果出现下图所示错误:
错误
开启 ssh 服务即可

service ssh restart

再次执行 start-dfs.sh 出现下图所示(都选yes)
在这里插入图片描述
访问 http://192.168.136.151:50070
在这里插入图片描述

  1. 运行 YARN
start-yarn.sh

YARN启动
访问 http://192.168.136.151:8088
在这里插入图片描述

二,Salave 节点

未完待续

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值