Docker安装Hadoop

Hadoop 是 Apache 软件基金会旗下的一个开源分布式计算平台。

Hadoop 的核心子系统说明如下：

• HDFS ： 一个高度容错性的分布式文件系统，适合部署在大量廉价的机器上，提供高
  吞吐量的数据访问 。
• YARN (Yet Another Resource Negotiator）：资源管理器，可为上层应用提供统一的资
  游、管理和调度 ，兼容多计算框架 。
• MapReduce ： 是一种分布式编程模型，把对大规模数据集的处理分发（ Map ）给网络
  上的多个节点 ，之后收集处理结果进行规约 （ Reduce ） 。

使用官方镜像

拉取镜像

docker pull  sequenceiq/hadoop -docker:2.7.0

完成镜像拉取后，使用 docker ru口指令运行镜像，同时打开 bash 命令行：

docker run -it sequenceiq/hadoop-docker:2 7.0 /etc/b oots trap.sh -bash

运行案例

bash-4.1# cd $HADOOP_PREFIXbash-4 1# pwd/usr/local/hadoop
bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.0 jar grep input output ’ dfs [a z.] +’