基于Docker快速搭建Hadoop集群

原创 2017年01月02日 22:16:48

### 1. 引言

开发环境使用Ubuntu Kylin16.04的系统,通过vmware-install.pl命令执行安装一直显示安装成功,但是却无法使用。最后通过使用apt-get找到一个安装包成功的解决了问题。命令如下,执行成功后,需要重新启动一下:

apt-get install open-vm-tools-desktop fuse

reboot

安装好vmware-tools之后就可以实现屏幕分辨率的自适应和文件的自由拖动。


### 2. docker安装集群

集群构建主要参考的是Github上面的[hadoop-cluster-docker](https://github.com/kiwenlau/hadoop-cluster-docker)


简单说步骤主要分为:

1. 下载Docker镜像

> sudo docker pull kiwenlau/hadoop:1.0


 2. 下载GitHub仓库

> git clone https://github.com/kiwenlau/hadoop-cluster-docker

3. 创建Hadoop网络

> sudo docker network create --driver=bridge hadoop

4. 运行Docker容器

> cd hadoop-cluster-docker
> ./start-container.sh

运行结果

start hadoop-master container...
start hadoop-slave1 container...
start hadoop-slave2 container...
root@hadoop-master:~#
看到@hadoop-master说明已经进入到hadoop-master的容器,此时可以进行操作
如果不小心退出docker容器,可以根据以下命令重新进入容器
> sudo docker attach hadoop-master 


版权声明:本文为博主原创文章,未经博主允许不得转载。

基于Docker快速搭建多节点Hadoop集群

基于Docker快速搭建多节点Hadoop集群 【编者的话】Docker最核心的特性之一,就是能够将任何应用包括Hadoop打包到Docker镜像中。这篇教程介绍了利用Docker在单机...
  • a724888
  • a724888
  • 2018年01月28日 00:27
  • 29

基于Docker的Hadoop集群快速搭建

1、创建镜像1.1 Dockerfile[root@hadron docker]# cd hadoop/ [root@hadron hadoop]# cat Dockerfile FROM cent...
  • chengyuqiang
  • chengyuqiang
  • 2017年12月24日 21:11
  • 232

docker快速搭建hadoop集群

学习Hadoop集群环境搭建是Hadoop入门必经之路。搭建分布式集群通常有两个办法: 要么找多台机器来部署(常常找不到机器)或者在本地开多个虚拟机(开销很大,对宿主机器性能要求高,光是安装多个虚拟...
  • luqiaolong
  • luqiaolong
  • 2016年03月13日 17:15
  • 615

使用docker搭建部署hadoop分布式集群

http://blog.csdn.net/xu470438000/article/details/50512442 使用docker搭建部署hadoop分布式集群 标签: do...
  • hnhbdss
  • hnhbdss
  • 2016年01月17日 11:58
  • 2053

快速搭建hadoop+hbase分布式集群

目录 目录 hadoop集群部署 zookeeper集群部署 HBase部署 结语hadoop集群部署1、 准备三台机器,如10.8.177.23,10.8.177.24,10.8.177.25 2...
  • u010209217
  • u010209217
  • 2016年07月25日 16:15
  • 279

基于Docker搭建Hadoop集群(ubuntu操作系统)

1.      项目说明关于Docker方面的内容,我们这里就不做介绍了,大家可以访问Docker官方网站(https://www.docker.com)获取详细的信息,包括Docker安装部署,基本...
  • jiangshouzhuang
  • jiangshouzhuang
  • 2016年09月17日 08:54
  • 1718

【转】使用Docker搭建hadoop集群

转载一个大神的blog,其实我是想转载另一篇的,但是不小心 改完了,才发现 转的是 准备看的 这篇, 好吧,不严谨了。 反正都要 转,先转了。这里附上大神的博客地址刚开始搭建Hadoop集群的时候,...
  • qq_33530388
  • qq_33530388
  • 2017年05月30日 21:04
  • 2020

Docker部署Hadoop集群

前几天写了文章“Hadoop 集群搭建”之后,一个朋友留言说希望介绍下如何使用Docker部署,这个建议很好,Docker不仅在生产环境威力巨大,对于我们在自己电脑中搭建学习实验环境更是非常便利 ...
  • u011537073
  • u011537073
  • 2016年10月12日 18:41
  • 1843

使用docker搭建hadoop分布式集群

使用docker搭建部署hadoop分布式集群 在网上找了很长时间都没有找到使用docker搭建hadoop分布式集群的文档,没办法,只能自己写一个了。 一:环境准备: 1:首先要有一个Cent...
  • xu470438000
  • xu470438000
  • 2016年01月13日 18:16
  • 38522

基于Docker搭建Hadoop集群

最近安装hadoop集群,翻了很多资料没有发现一个好安装的教程。无意间发现了这篇文章,作者已经将Hadoop打包到Docker镜像中,我们就可以快速地在单个机器上搭建Hadoop集群。 原文地址:h...
  • stefanie927
  • stefanie927
  • 2017年04月19日 19:50
  • 221
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:基于Docker快速搭建Hadoop集群
举报原因:
原因补充:

(最多只允许输入30个字)