hadoop
假不正经K
这个作者很懒,什么都没留下…
展开
-
Hadoop,HBase,Storm,Spark到底是什么?
HDFS: 存储系统 MapReduce:计算系统 Hive:提供给SQL开发人员(通过HiveQL)的MapReduce,基于Hadoop的数据仓库框架 Pig:基于Hadoop的语言开发的 HBase:NoSQL数据库 Flume:一个收集处理Hadoop数据的框架 Oozie:一个让用户以多种语言(如MapReduce,Pig和Hive)定义一系列作业的工作流处理系统 Amba转载 2015-10-21 10:25:06 · 402 阅读 · 0 评论 -
HistoryServer的原理详解
HistoryServer的原理详解 本文介绍了YARN中historyServer的原理和配置 HistoryServer的原理简介 下图展示了historyServer的数据流向图.解释: 1. NodeManager在启动的时候会初始化LogAggregationService服务, 该服务会在把本机执行的container log (在container结束的时候)收集并存放到hdf转载 2015-07-17 11:26:58 · 1776 阅读 · 0 评论