- 博客(3)
- 资源 (13)
- 问答 (1)
- 收藏
- 关注
转载 hadoop的关键进程
hadoop集群中主要进程有master: NameNode, ResourceManager,slaves: DataNode, NodeManager, RunJar, MRAppMaster,YarnChild其中 RunJar, MRAppMaster,YarnChild与随着某个job的创建而创建,随着job的完成而终止。它们的作用分别是:RunJar:完成
2017-05-15 14:39:11 929
转载 HBase学习总结:HBase的工作原理
一、切分和分配大表 Hbase中的表是由行和列组成的。HBase中的表可能达到数十亿行和数百万列。每个表的大小可能达到TB级,有时甚至PB级。这些表会切分成小一点儿的数据单位,然后分配到多台服务器上。这些小一点儿的数据单位叫region。托管region的服务器叫RegionServer。一张表由多个小一点的region组成,如图1所示。 图1 多个小一点的region组成一张表
2017-05-12 17:34:37 610
转载 Hbase架构与原理
Hbase是Apache Hadoop中的一个子项目,Hbase依托于Hadoop的HDFS作为最基本存储基础单元,通过使用hadoop的DFS工具就可以看到这些这些数据存储文件夹的结构,还可以通过Map/Reduce的框架(算法)对HBase进行操作一、 hbase架构 1.概述。HBase是Apache Hadoop的数据库,能够对大型数据提供随机、实时的读写访问。HBase的
2017-05-10 11:29:42 1000
spring boot 配置redis缓存
2016-04-28
TA创建的收藏夹 TA关注的收藏夹
TA关注的人