- 博客(5)
- 收藏
- 关注
RSS订阅原创 Mongodb中Aggregation特性
Mongodb是目前最受欢迎的大数据存储平台之一，它可以作为云计算技术的底层存储层，比如为spark、hadoop、pig、hive、drill等计算框架提供源数据。Mongodb本身也提供了aggregation、mapreduce特性，以支持对大数据的计算、统计、分类等需求。 Aggregation简单来说，就是提供数据统计、分析、分类的方法，这与mapreduc...
2015-11-30 18:34:37
1833
原创 Mongodb中Sharding集群
随着mongodb数据量的增多，可能会达到单个节点的存储能力限制，以及application较大的访问量也会导致单个节点无法承担，所以此时需要构建集群环境，并通过sharding方案将整个数据集拆分成多个更小的chunk，并分布在集群中多个mongod节点上，最终达到存储和负载能力扩容、压力分流的作用。在sharding架构中，每个负责存储一部分数据的mongod节点称为shard（分...
2015-11-20 21:09:10
1188
原创 Mongodb客户端原理
JAVA客户端原理简述 mongodb提供了官方的JAVA客户端，在上文中我们已经看到了示例。 接下来我们简单的阐述一下它的基本原理： 1）MongoClient参数列表中，允许指定多个mongod的addresses，注意，它们要么是同一个replica set中所有memebers列表，要么为同一个cluster的mongos列表，且不能混合使用。...
2015-11-15 21:07:22
424
原创 Mongodb存储特性与内部原理
一、存储引擎（Storage） mongodb 3.0默认存储引擎为MMAPV1，还有一个新引擎wiredTiger可选，或许可以提高一定的性能。 mongodb中有多个databases，每个database可以创建多个collections，collection是底层数据分区（partition）的单位，每个collection都有多个底层的数据文件组成。（参见下文da...
2015-11-08 22:29:09
2444
原创 Mongodb中Replication架构
Mongodb的高可用（HA）架构模式就是replication，replication提供了数据冗余以提高可用性，即将数据在多个servers上备份，当其中部分server失效时，集群仍可以提供服务。在mongodb中，“replica set”（复制集）即为replication模式，复制集为一组mongod实例，它们持有相同的数据集，其中一个实例为primary，用来接收客户端的...
2015-11-04 16:47:25
960
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人