0x8g1T9E-

本文探讨了使用 Docker 搭建 Hadoop + Hive + Spark 集群的方法，项目地址在此。在阅读本文前，建议先对 Docker 以及 Docker Compose 有基本的了解。准备工作本项目基于Docker和Docker Compose，搭建的集群包含以下部分：Hadoop Hive Spark本项目参考了Big Data Europe的一些工作。项目中所使用的 Docker 镜像可能会被更新，可以参看他们的Docker Hub以获取最新镜像。本...

本文会搭建一个伪分布式版hadoop集群，用于CI测试非常方便。准备准备的文件结构如下：├── dockerfile├── hadoop│ ├── core-site.xml│ ├── hadoop-2.7.7.tar.gz│ ├── hdfs-site.xml│ ├── mapred-site.xml└── start-service.shhadoop的安装包下载：https://apache.website-solution.net/hadoop/comm...

Hadoop配置Docker安装docker$ yum install docker设置开机自启Docker$ systemctl enable docker启动Docker$ systemctl start docker查看docker版本[root@VM-16-13-centos ~]$ docker -v"Docker version 1.13.1, build 0be3e21/1.13.1"docker 配置阿里云镜像加速sudo mkdir -p /et