ubuntu虚拟机+docker+hadoop完全分布式环境搭建

环境

win10+ubuntu-20.04虚拟机

初衷

使用vm虚拟机模拟多节点实现hadoop完全分布式搭建实在过于消耗资源，正好学习到docker，就想着尝试使用docker容器来模拟多个节点，同时又可以节省资源，于是上网搜索了一下，果然有案例，索性直接上手。只需要一个虚拟机，安装Linux其中一个发行版即可，推荐ubuntu，维护完善且社区活跃。

步骤

1. 安装Ubuntu虚拟机

这个当然是必备啦，docker目前对于windows还不是很友好，而日常又使用windows系统，于是装个虚拟机就解决咯。具体教程网上搜即可。
（注意虚拟机安装后先换源）

2. 安装docker

实际上我也是docker的初学者，这部分的安装也是跟着网上教程做的，具体原理有待研究。
https://cloud.tencent.com/developer/article/1167995

步骤

更新apt

sudo apt-get upgrade

安装CA证书（docker使用https协议）

sudo apt install apt-transport-https ca-certificates curl software-properties-common`

添加docker官方GPG key

   curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo apt-key add -

设置docker官方源

sudo add-apt-repository \
    "deb [arch=amd64] https://mirrors.ustc.edu.cn/docker-ce/linux/ubuntu \
    $(lsb_release -cs) \
    stable"

更新apt-get索引

sudo apt-get upgrade

安装docker ce

sudo apt-get install docker-ce

跑个hello-world验证是否安装成功

sudo docker run hello-world

输出结果

注意：如果运行失败，或者运行速度很慢，应该换源。做法是配置/etc/docker/daemon.json文件来配置daemon，可以选择网易源、清华源、中科大源

sudo vim /etc/docker/daemon.json

文件里写入

{
   
  "registry-mirrors": ["https://hub-mirror.c.163.com"]
}

重启docker使配置生效

sudo service docker restart

3. 在docker上装个ubuntu镜像

步骤

在docker安装系统很简便，因为是镜像+容器机制，只需要一条拉取指令即可。

docker pull ubuntu

新建一个目录，方便宿主机和容器的文件传输。顺便run了容器

$ cd ~
$ mkdir build
$ docker run -it -v /home/用户名/build/:/root/build --name 镜像启动名称(无固定形式) 镜像名

装了docker里的ubuntu，同样我们也要进行一些配置（以下操作都在ubuntu容器中）

先换源
1.备份原来的源