MongoDB集群如何无缝扩容扩展

最新推荐文章于 2024-08-01 10:01:30 发布
最新推荐文章于 2024-08-01 10:01:30 发布
阅读量5.5k 收藏 1
点赞数
分类专栏： MongoDB 文章标签： mongodb 存储 扩展 sharding
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hanyueqi/article/details/60580234
版权
当MongoDB面临数据量增长、磁盘和内存接近饱和、访问量增加等问题时，需要进行扩容。扩容策略包括Scale Up（垂直扩展）和Scale Out（水平扩展）。对于读密集型应用，可通过开启SlaveOK在副本集间分散读操作；而对于写密集型，单节点可能无法承受，此时Sharding和Replica Set成为解决方案。Sharding通过分布式存储解决读写瓶颈，而Replica Set提供高可用性和数据复制。根据不同的业务需求，选择合适的扩容方案，如增加内存、硬盘或利用消息队列进行数据迁移。
摘要由CSDN通过智能技术生成
1、什么情况下需要进行扩容
  • 数据量接近单机磁盘总容量
    • 数据容量接近磁盘容量80% df
    • 内存使用量接近内存容量80% free
    • 访问量 iostat -xdk 1
  • storage与datesize两倍左右关系
2、常用的MongoDB集群扩容方案
  • Scale Up
  • Scale Out
    • 读密集型
      • 单节点无法应对所有操作
      • 即便hotdate index已经加载到内存中
      • 读操作分不到各个副本上
      • 开启SlaveOK选项
      • MongoDB Driver都是支持的
    • 写密集型
      • 写负载太密集
      • 无法将工作完整加载到物理内存
      • Sharding
        • <
最低0.47元/天 解锁文章
断剑走江湖
关注
专栏目录
MongoDB集群升级扩容操作
open
04-27 1058
本文重点描述：MongoDB集群模式采用3台物理服务器，硬件配置：256G内存，3*3TSSD RAID5；现有磁盘空间使用量75%已经达到空间阈值；需要升级磁盘空间以及更换raid10（这里官方推荐读写性能更高），硬件磁盘升级为：6*3TSSD RAID10。主服务器（Primary） 包含了所有的改变操作（写）的日志。副本服务器（Secondary）集群包含有所有的主服务器数据，因此当主服务器挂掉了，就会在副本服务器上重新选取一个成为主服务器。
mongodb 集群shard_mongodb shard集群扩容和收缩
weixin_30772189的博客
01-11 388
在这个集群的基础上再加个shard-4mongodb-shard-4:192.168.10.91:10003192.168.10.92:10003192.168.10.93:10003###shard集群水平扩展####在上述三台服务器上启动shard4的mongodb实例# mkdir -p /data/mongodb/shard4# mongod --shardsvr --replSet sh...
【mongodb】mongodb副本集的搭建和使用
最新发布
zerotoall的博客
08-01 1147
# Mongodb副本集介绍： Mongodb复制集由一组Mongod实例（进程）组成，包含一个Primary节点和多个Secondary节点。 Mongodb Driver（客户端）的所有数据都写入Primary，Secondary从Primary同步写入的数据，以保持复制集内所有成员存储相同的数据集，实现数据的高可用。 ​ # 副本集作用： 数据冗余，用做故障恢复使用，当发生硬件故障或者其它原因造成的宕机时，可以使用副本进行恢复。 读写分离，读的请求分流到副本上，减轻主节点的读压力。
MongoDB分片集群shard扩缩容
三思的博客
04-13 2705
文章目录一、分片shard节点缩容二、分片shard节点扩容 一、分片shard节点缩容 Mongodb分片集群shard节点缩容相对是比较简单的，可以利用MongoDB自身的平衡器来将预下线中的分片中存储的数据进行转移，待预下线shard节点中无任何数据库，进行下线处理。所有的下线操作通过mongos进行管理实现。 1、查看分片集群是否开启平衡器 mongos> sh.getBalancerState() true 2、发起删除分片节点命令，平衡器开始自动迁移数据 -- 查看当前集群状态 mong
关于mongoDb
站在技术的边缘，遥望你
06-09 4109
目前部署是mongoS有三台，即mongo服务器 mongoDb有三组，每一组有三台主副机，其中一台主，两台副 起初在设置的时候，每组副本集其IP都在server.conf里面写死了，一组三台，就得修改这三台的配置： shardsvr=true replSet=unilog-shard03/10.70.175.69:27017,10.70.175.70:27017,10.70.1
MongoDB分片和水平扩展
互联网知识分享
08-24 499
MongoDB分片是指将一个MongoDB集合的数据分散存储到多个物理机器上，以实现数据的水平扩展和负载均衡。分片可以提高读写吞吐量和存储容量，并且可以根据实际需求动态扩展。
MongoDB集群实战指南：高可用与扩展，打造稳定可靠的MongoDB集群
MongoDB集群是一种分布式数据库系统，它将数据存储在多个服务器（称为节点）上，以实现高可用性、可扩展性和性能。本章将介绍MongoDB集群的基础知识，包括其架构、组件和基本概念。 MongoDB集群由以下主要组件组成...
mongodb 单机 扩容
09-04
- *2* [MongoDB集群如何无缝扩容扩展](https://blog.csdn.net/hanyueqi/article/details/60580234)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_...
MongoDB
arron121741的博客
03-03 1932
Mongo高级特性
k8s跟mysql集群的crd_有了这款商业分布式块存储，K8s 上跑数据库也不用担心了
weixin_34072003的博客
01-27 405
原标题：有了这款商业分布式块存储，K8s 上跑数据库也不用担心了毋庸置疑，容器与容器编排已经成为目前 IT 人员最为关注的技术之一并得到快速的普及。根据 Gartner 的调查(1)，截止到 2022 年，仅有 10% 的 CIO 对容器使用没有任何的计划，而 27% 的 CIO 已经计划将容器应用与生产环境。 Gartner IOCS 2018 Conference polling result...
MongoDB进阶之动态字段设计详解
09-09
主要给大家介绍了MongoDB进阶之动态字段设计的相关资料，文中介绍的非常详细，对大家具有一定的参考学习价值，需要的朋友们下面跟着小编一起来学习学习吧。
mongodb shard集群扩容和收缩
weixin_34004576的博客
04-05 1145
2019独角兽企业重金招聘Python工程师标准>>> ...
MongoDB副本集群节点扩容和收缩
武子豪的博客
11-23 1219
下面我们来就举例MongoDB库的副本集群节点扩容和收缩。
MongoDB解决磁盘不足
热门推荐
云原生devsecops
03-31 1万+
mongodb磁盘扩容
MongoDB从单集群扩展为Sharding
weixin_34293141的博客
12-12 185
MongoDB支持自动分片，可以摆脱手动分片的管理困扰。集群自动切分数据，做负载均衡。以下为单机搭建的测试环境。 1.创建数据库目录与日志目录 useradd mongo mkdir -p /database/data/mongodb_data mkdir -p /database/data/logs mkdir -p /database/data/key ...
mongodb的sharding(分片)
yuanchao99的专栏
02-19 7089
sharding是mongodb进行横向扩容的方法，sharding把一个集合的不同部分存储到不同的机器上，当一个数据库集合变得很大时，你只需要加入新的机器即可。sharding自动把集合的数据分布到新的服务器上，sharding自动实现数据和读写负载均衡。 为了使集群具有sharding功能，首先需要建立一个sharding集群。然后就可以在集群内指定某个数据库是否启用sharding，在启用
mogodb简单扩容
回南山种豆的专栏
05-17 782
mogodb在使用过程中，扩容的场景并不多，一般需要扩容的情况是，磁盘Io达到瓶颈或者连接并发达到瓶颈， 下面讲一下简单的扩容步骤；   list 1、关掉源机器的mogo 登陆mongo 执行 db.shutdownServer() or kill -2 mongod or kill -15 mongod; 2、拷贝 将源机器上的mongo目录拷贝到目标机器； 放在目标机
MongoDB增加排序内存--版本4.4.1
weixin_43054437的博客
11-09 975
调取大量文件并进行排序时，MongoDB报错，超出内存使用范围，报错信息如下： mongo排序默认的最大内存限制为100m，超出这个限制就会报错。所以查询时查询的字段过多，查询的数据量过大等情况导致排序缓存超出限制会产生这样的问题。 增大内存指令： 进入MongoDB后 use admin # 设置 db.adminCommand({setParameter:1, internalQueryMaxBlockingSortMemoryUsageBytes:209715200}) # 查询.
MongoDB集群扩展与管理指南
"《Scaling MongoDB》是一本由Kristina Chodorow编著的关于MongoDB扩展性和集群管理的书籍，涵盖了MongoDB的分片、集群搭建及管理等关键知识点。内容涉及分片集群的设置、工作原理、数据查询与更新、集群操作、监控...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值