- 博客(3)
- 收藏
- 关注
转载 关于hbase的一些调优问题
1、HMaster HMaster的任务前面已经说过了,两个大方向:一、管理Hbase Table的 DDL操作 二、region的分配工作,任务不是很艰巨,但是如果采用默认自动split region的方式, HMaster会稍微忙一些,负载不大,可适度对此进程做适量放大heap 的操作,但不可太大,因为更耗内存的是HRegionServer 2、HRe
2015-12-24 21:58:46 9753
转载 Flume NG 简介及配置实战
1、Flume 的一些核心概念:1.1 数据流模型1.2 高可靠性1.3 可恢复性2、Flume 整体架构介绍2.1 Exec source2.2 Spooling Directory Source3、常用架构、功能配置示例3.1 先来个简单的:单节点 Flume 配置3.2 单节点 Flume 直接写入 HDFS3.3 来一个常见架构:多 agent 汇聚写入 HDFS3.3.1 在各个webs
2015-12-15 21:22:04 368
转载 hadoop1.x和hadoop2.x的对比
1.能否总结出MapReduce设计思路? 2.hadoop1遇到了什么问题? 3.hadoop2做了什么改进,具体哪些变化? 对 hadoop1 和 hadoop 2 做了一个解释 图片不错 拿来看看 Hadoop 1.0 从上图中可以清楚的看出原 MapReduce 程序的流程及设计思路: 首先用户程序 (JobClient) 提交了一个
2015-12-03 21:15:20 346
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人