mongdb内存占用过大问题解决

最新推荐文章于 2024-06-26 17:37:14 发布
最新推荐文章于 2024-06-26 17:37:14 发布
阅读量351 收藏
点赞数
分类专栏： mongodb
原文链接：https://www.cnblogs.com/On-my-way/p/9708225.html
版权 
在使用MongoDB的时候遇到了一个内存占用的问题，爬虫爬过来的图片在库中存的是网络地址，要写一个脚本对图片进行分批下载，所以会对MongoDB频繁查询。
发现使用过程中mongod的服务占用了40.5%的内存




查看相关资料得知3.4版本后，内存默认使用的是(系统内存-1GB)*50%

 

我通过以下命令启用MongoDB

/usr/bin/mongod --config /etc/mongod.conf --fork --wiredTigerCacheSizeGB 8

关键在于  --wiredTigerCacheSizeGB 8  限制缓存使用内存大小为8GB，这样MongoDB使用的内存就是(8GB-1GB)* 50%

ammengke
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
OpenStack Ceilometer用MongoDB解决占用磁盘空间过大问题
09-09
为了解决Ceilometer使用MongoDB时磁盘空间过大的问题，有几种策略可以采用： 1. 减少预分配的大小（或禁用预分配）：MongoDB的预分配机制是为了提高写入性能，但也会导致磁盘空间的浪费。可以通过调整MongoDB配置来...
MongoDB 内存使用情况分析
09-10
解决高内存使用问题的方案可能包括增加系统内存、采用分片（sharding）以分散负载，或者升级到SSD硬盘以提高I/O性能。 总的来说，MongoDB 的内存使用情况需要通过多种途径进行综合分析，包括使用`vmtouch`等工具来...
MongoDB内存过高问题分析解决
云胜的笔记
03-28 1007
freelist的就是已经分配后来又用完释放的内存，存在这个freelist数据结构中，已备后面重用这些内存，我的理解就是我用完了，但是我先拿着。因为这里的配置只是wiredTiger的内存cache限额，并不是mongo的全部使用内存限额，整个mongo进程的内存占用要比这个值大，所以cacheSizeGB万万不可设置超过RAM的60%。， 多数情况下，内存使用率高的原因是 tcmalloc 未能及时将内存归还给操作系统，导致内存最大可能达到几十GB。已经用满了，这种情况可以加一下内存了。
mongodb内存占用过高处理
m0_61088973的博客
06-16 2837
2、修改最大占用内存。打开mongodb安装目录，找到配置文件，cacheSizeGB指定分配的最大内存。3、重启mongodb服务，查询mongodb的最大占用内存，就会发现修改成功。1、首先查询下mongodb的最大占用内存。
MongoDB内存飙升的解决办法
qq_41504081的博客
06-26 487
遇到MongoDB内存飙升，限制内存的解决办法
mongoDB占用内存太大解决方案
虫二的专栏~~在路上~~~
03-11 1032
关键在于 --wiredTigerCacheSizeGB 16 限制缓存使用内存大小为16GB，这样MongoDB使用的内存就是(16GB-1GB)* 50%=7.5G，还行。后来研究了一下可以通过以下命令启用MongoDB。启动后占用内存终于降低了，你也赶快去试一下吧。运行程序稍微长点，就内存爆点了。
MongoDB内存占用过高问题解决方案
bellye123的专栏
05-09 3236
1. Docker运行 1.1启动容器时可使用启动时加参数 -m 1g 来限制容器内存；或者参考docker hub中简介使用wiredTigerCacheSizeGB参数启动： docker run --name some-mongo -d mongo --wiredTigerCacheSizeGB 1.5 1.2 运行中的容器可使用 docker update -m 1g name 来更新容器使用内存（如果容器在运行中设置小于运行时内存可能会失败，可以停止容器后设置内存再...
关于mongodb占用内存过大的问题
热门推荐
若云流风的专栏
11-02 2万+
一、现象 最近发现自己服务器内存越来越少，查了一下原来是部署的mongodb使用内存在线性增加。不查不知道，一查吓一跳，竟然占用了3G的内存。。 二、分析 1.内存增加的原因 mongo为了优化他的读写效率，将内存当做缓存，所以你读写次数越多，缓存就越大。默认值： 从3.4开始，WiredTiger内部......
MongoDB内存占用过大，
u012632105的博客
12-28 724
MongoDB内存占用过大，最后OOM的解决办法 – IPCPU-网络之路
mongodb占用内存过大
qingfeng2556的博客
11-19 3371
主机4核8G内存 1、情景: 当天运营让统计最近3个月消耗数量, 3个每月聚合统计，每月数据大约在1千万，表最大1.5亿条， 同时有查询插入，每秒查询20，插入10 此时内存降低1G，报警 2、尝试解决 查询完毕后，内存没释放，报警没停止 尝试释放内存命令 db.runCommand({closeAllDatabases:1})，但是3.2以后不能用，目前线上3.4.0 ...
MongoDB实例内存使用率高问题
as8996606的博客
08-08 1703
通过修改MongoDB配置文件或修改docker容器配置可以解决内存使用率高的问题
mongodb内存占用低 mysql_MongoDB内存使用情况
weixin_32821643的博客
02-07 397
MongoDB在3.2版本之后默认采用的WiredTiger存储引擎，可以通过cacheSizeGB参数设置内存上限。刚开始使用MongoDB的时候没有特别在意他的内存占用情况，想当然的和MySQL做了先入为主的中和，当然最主要的还是因为是小白一枚，但是后来使用过程中发现，MongoDB内存占用是非常大的。从官方文档可以得知，如果不设置cacheSizeGB内存，一个mongod实例几乎要占用服务...
解决MongoDB占用内存过大频繁死机的方法详解
09-08
本文将深入探讨如何解决MongoDB内存占用过大的问题。 首先，理解MongoDB的内存管理机制至关重要。MongoDB使用WiredTiger存储引擎，该引擎内置了一个高速缓存，用于存储最近访问的数据以提高读取速度。默认情况下，...
mpu6050陀螺仪使用方法开发教程文档.docx
07-30
mpu6050陀螺仪使用方法
【SCI顶级】龙格库塔算法RUN-CNN-LSTM-Multihead-Attention温度预测【含源码 5747期】.zip
07-30
CSDN海神之光上传的全部代码均可运行，亲测可用，直接替换数据即可，适合小白； 1、代码压缩包内容 主函数：Main .m； 数据； 调用函数：其他m文件；无需运行 运行结果效果图； 2、代码运行版本 Matlab 2019b；若运行有误，根据提示修改；若不会，可私信博主； 3、运行操作步骤 步骤一：将所有文件放到Matlab的当前文件夹中； 步骤二：双击打开除Main.m的其他m文件； 步骤三：点击运行，等程序运行完得到结果； 4、仿真咨询 如需其他服务，可私信博主或扫描博主博客文章底部QQ名片； 4.1 CSDN博客或资源的完整代码提供 4.2 期刊或参考文献复现 4.3 Matlab程序定制 4.4 科研合作 智能优化算法-CNN-LSTM-Mutilhead-Attention回归预测系列程序定制或科研合作方向： 4.4.1 遗传算法GA/蚁群算法ACO-CNN-LSTM-Mutilhead-Attention回归预测 4.4.2 粒子群算法PSO/蛙跳算法SFLA-CNN-LSTM-Mutilhead-Attention回归预测 4.4.3 灰狼算法GWO/狼群算法WPA-CNN-LSTM-Mutilhead-Attention回归预测 4.4.4 鲸鱼算法WOA/麻雀算法SSA-CNN-LSTM-Mutilhead-Attention回归预测 4.4.5 萤火虫算法FA/差分算法DE-CNN-LSTM-Mutilhead-Attention回归预测
大模型的数学之魂：统计学习理论精要
07-30
大型机器学习模型，通常简称为“大模型”，是指具有数十亿甚至数千亿参数的深度神经网络模型。这些模型因为其庞大的参数量和复杂的计算结构，能够处理非常复杂的任务和数据，展现出强大的表达能力和预测性能。大模型在自然语言处理、计算机视觉、语音识别和推荐系统等多个领域都有广泛的应用。 大模型的设计目的是通过训练海量数据来学习复杂的模式和特征，从而具备强大的泛化能力，能够对未见过的数据做出准确的预测。与参数较少、层数较浅的小模型相比，大模型虽然需要更多的计算资源和时间来训练和推理，但它们展现出了一种被称为“涌现能力”的特性，即从原始训练数据中自动学习并发现新的、更高层次的特征和模式。 大模型的发展历程可以分为几个阶段，从早期的卷积神经网络模型发展到以Transformer为代表的全新神经网络模型，再到当前以GPT为代表的预训练大模型阶段。Transformer架构因其自注意力机制而成为大模型的核心技术，它使得模型能够更好地理解和处理文本数据中的长距离依赖关系。 大模型的分类主要包括语言大模型（NLP）、视觉大模型（CV）和多模态大模型。语言大模型专注于处理文本数据和理解自然语言，而视觉大模型用
唯美淡雅四页.zip
最新发布
07-30
【简历模板】工作总结、商业计划书、述职报告、读书分享、家长会、主题班会、端午节、期末、夏至、中国风、卡通、小清新、岗位竞聘、公司介绍、读书分享、安全教育、文明礼仪、儿童故事、绘本、防溺水、夏季安全、科技风、商务、炫酷、企业培训、自我介绍、产品介绍、师德师风、班主任培训、神话故事、巴黎奥运会、世界献血者日、防范非法集资、3D快闪、毛玻璃、人工智能等等各种样式的ppt素材风格。 设计模板、图片素材、PPT模板、视频素材、办公文档、小报模板、表格模板、音效配乐、字体库。 广告设计：海报，易拉宝，展板，宣传单，宣传栏，画册，邀请函，优惠券，贺卡，文化墙，标语，制度，名片，舞台背景，广告牌，证书，明信片，菜单，折页，封面，节目单，门头，美陈，拱门，展架等。 电商设计：主图，直通车，详情页，PC端首页，移动端首页，钻展，优惠券，促销标签，店招，店铺公告等。 图片素材：PNG素材，背景素材，矢量素材，插画，元素，艺术字，UI设计等。 视频素材：AE模板，会声会影，PR模板，视频背景，实拍短片，音效配乐。 办公文档：工作汇报，毕业答辩，企业介绍，总结计划，教学课件，求职简历等PPT/WORD模板。
仿真验证阵列可以提高接收信号信噪比
07-30
这是一份模拟了阵列输入信号及噪声，并验证了相对于阵列接收到的信号，阵列输出信号可以将信噪比提高M倍，其中M为阵列的阵元个数的代码。 代码中可以随意修改阵元个数、阵元间距、波束指向角度、信号频率等。 代码中关键部分均含有文字注释，完全不必担心看不懂。 无论是从仿真波形，还是计算的信噪比结果均能看出阵元数为M的阵列将信号的信噪比提高了M倍。
mongodb内存泄漏是为什么
04-25
MongoDB内存泄漏是指在使用MongoDB数据库时，由于某些原因导致内存无法被正确释放，从而导致内存占用不断增加的问题。这可能会导致系统性能下降、响应时间延长甚至系统崩溃。 造成MongoDB内存泄漏的原因可能有多种...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值