Docker + Hadoop 搭建完全分布式

本文详细介绍了如何使用 Docker 在本地搭建一个完全分布式的 Hadoop 集群,包括 MySQL、Java、Python3 和 Scala 的安装,以及 Hadoop 相关配置文件的设置,如 core-site.xml、hdfs-site.xml 等,最终通过 Docker 网络配置和 SSH 配置实现集群节点间的通信。
摘要由CSDN通过智能技术生成

yum -y install openssl

wget

远程下载工具

yum -y install wget

开发工具安装


Mysql 安装

请参考我的另一篇文章:

《Hadoop 高并发集群 与 开发环境部署》第 5.1 小节

Java 安装

请参考我的另一篇文章:

《Hadoop 高并发集群 与 开发环境部署》第 5.2 小节

Python3 安装

请参考我的另一篇文章:

《Hadoop 高并发集群 与 开发环境部署》第 5.3 小节

Scala 安装

请参考我的另一篇文章:

《Hadoop 高并发集群 与 开发环境部署》第 5.4 小节

制作镜像


打包镜像

docker commit -a “「Image Name」” -m “「Comment」” 「CONTAINER ID」 「Image Name」:v「version」

开始生产集群

=====================================================================

统一口径


  • 14
    点赞
  • 16
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值