监控mongo状态慢查询

最新推荐文章于 2024-05-31 09:27:22 发布
最新推荐文章于 2024-05-31 09:27:22 发布
阅读量701 收藏 1
点赞数
分类专栏： mongodb 文章标签： mongodb
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44277627/article/details/125935348
版权

mongostat详解
mongostat是mongdb自带的状态检测工具，在命令行下使用。它会间隔固定时间获取mongodb的当前运行状态，并输出。如
果你发现数据库突然变慢或者有其他问题的话，你第一手的操作就考虑采用mongostat来查看mongo的状态。
它的输出有以下几列：
inserts/s 每秒插入次数
query/s 每秒查询次数
update/s 每秒更新次数
delete/s 每秒删除次数
getmore/s 每秒执行getmore次数
command/s 每秒的命令数，比以上插入、查找、更新、删除的综合还多，还统计了别的命令
flushs/s 每秒执行fsync将数据写入硬盘的次数。
mapped/s 所有的被mmap的数据量，单位是MB，
vsize 虚拟内存使用量，单位MB
res 物理内存使用量，单位MB
faults/s 每秒访问失败数（只有Linux有），数据被交换出物理内存，放到swap。不要超过100，否则就是机器内存太
小，造成频繁swap写入。此时要升级内存或者扩展
locked % 被锁的时间百分比，尽量控制在50%以下吧
idx miss % 索引不命中所占百分比。如果太高的话就要考虑索引是不是少了
q t|r|w 当Mongodb接收到太多的命令而数据库被锁住无法执行完成，它会将命令加入队列。这一栏显示了总共、读、写
3个队列的长度，都为0的话表示mongo毫无压力。高并发时，一般队列值会升高。
conn 当前连接数
time 时间戳

使用profiler
类似于MySQL的slow log, MongoDB可以监控所有慢的以及不慢的查询。
在这里插入图片描述
Profiler默认是关闭的，你可以选择全部开启，或者有慢查询的时候开启。

> use test
switched to db test
> db.setProfilingLevel(2);
{"was" : 0 , "slowms" : 100, "ok" : 1} // "was" is the old setting
> db.getProfilingLevel()

查看Profile日志

> db.system.profile.find().sort({$natural:-1})
{"ts" : "Thu Jan 29 2009 15:19:32 GMT-0500 (EST)" , "info" :
"query test.$cmd ntoreturn:1 reslen:66 nscanned:0 query: { profile: 2 } nreturned:1 bytes:50" ,
"millis" : 0} ...

3个字段的意义
ts：时间戳
info：具体的操作
millis：操作所花时间，毫秒
不多说，此处有官方文档。注意，造成满查询可能是索引的问题，也可能是数据不在内存造成因此磁盘读入造成。
使用Web控制台
Mongodb自带了Web控制台，默认和数据服务一同开启。他的端口在Mongodb数据库服务器端口的基础上加1000，如果是默
认的Mongodb数据服务端口(Which is 27017)，则相应的Web端口为28017

在这里插入图片描述
这个页面可以看到
当前Mongodb的所有连接
各个数据库和Collection的访问统计，包括：Reads, Writes, Queries, GetMores ,Inserts, Updates, Removes
写锁的状态
以及日志文件的最后几百行（CentOS+10gen yum 安装的mongodb默认的日志文件位于/var/log/mongo/mongod.log)
可以参考右边的截图
db.stat()
获取当前数据库的信息，比如Obj总数、数据库总大小、平均Obj大小等

> use test
switched to db test
> db.stats()
{
"collections" : 9,
"objects" : 4278845,
"avgObjSize" : 224.56603031892953,
"dataSize" : 960883236,
"storageSize" : 1195438080,
"numExtents" : 59,
"indexes" : 13,
"indexSize" : 801931264,
"fileSize" : 6373244928,
"ok" : 1
}

db.serverStatus()
获取服务器的状态

{
"version" : "1.6.5",
"uptime" : 7208469,
"uptimeEstimate" : 7138829,
"localTime" : "Wed Oct 26 2011 22:23:07 GMT+0800 (CST)",
"globalLock" : {
"totalTime" : 7208469556704,
"lockTime" : 4959693717,
"ratio" : 0.000688036992871448,
"currentQueue" : {
"total" : 0,
"readers" : 0,
"writers" : 0
}
},
"mem" : {
"bits" : 64,
"resident" : 3131,
"virtual" : 6172,
"supported" : true,
"mapped" : 4927
},
"connections" : {
"current" : 402,
"available" : 2599
},
"extra_info" : {
"note" : "fields vary by platform",
"heap_usage_bytes" : 832531920,
"page_faults" : 8757
},
"indexCounters" : {
"btree" : {
"accesses" : 2821726,
"hits" : 2821725,
"misses" : 1,
"resets" : 0,
"missRatio" : 3.543930204420982e-7
}
},
"backgroundFlushing" : {
"flushes" : 120133,
"total_ms" : 73235923,
"average_ms" : 609.6236920746173,
"last_ms" : 1332,
"last_finished" : "Wed Oct 26 2011 22:22:23 GMT+0800 (CST)"
},
"cursors" : {
"totalOpen" : 0,
"clientCursors_size" : 0,
"timedOut" : 238392
},
"repl" : {
"ismaster" : true
},
"opcounters" : {
"insert" : 269351,
"query" : 19331151,
"update" : 14199331,
"delete" : 1,
"getmore" : 145575,
"command" : 55982302
},
"asserts" : {
"regular" : 0,
"warning" : 0,
"msg" : 0,
"user" : 27,
"rollovers" : 0
},
"ok" : 1
}

需要关心的地方：
connections 当前连接和可用连接数，听过一个同行介绍过，mongodb最大处理到2000个连接就不行了（要根据你的机
器性能和业务来设定），所以设大了没意义。设个合理值的话，到达这个值mongodb就拒绝新的连接请求，避免被太多
的连接拖垮。
indexCounters:btree:misses 索引的不命中数，和hits的比例高就要考虑索引是否正确建立。你看我的”missRatio” :
3.543930204420982e-7，很健康吧。所以miss率在mongostat里面也可以看
其他的都能自解释，也不是查看mongo健康状况的关键，就不说明了。
db.currentOp()
Mongodb 的命令一般很快就完成，但是在一台繁忙的机器或者有比较慢的命令时，你可以通过db.currentOp()获取当前正在执
行的操作。
在没有负载的机器上，该命令基本上都是返回空的

> db.currentOp()
{ "inprog" : [ ] }

以下是一个有负载的机器上得到的返回值样例：

{ "opid" : "shard3:466404288", "active" : false, "waitingForLock" : false, "op" : "query", "ns" :
"sd.usersEmails", "query" : { }, "client_s" : "10.121.13.8:34473", "desc" : "conn" },

字段名字都能自解释。如果你发现一个操作太长，把数据库卡死的话，可以用这个命令杀死他

> db.killOp("shard3:466404288")

MongoDB Monitoring Service
在这里插入图片描述
MongoDB Monitoring Service(MMS)是Mongodb厂商提供的监控服务，可以在网页和Android客户端上监控你的MongoDB状
况

@9211
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
MongoDB运行状态监控、性能分析工具mongostat详解
12-16
除了`mongostat`，还可以通过启用MongoDB的**Profiler**来记录慢查询。Profiler可以设置为只记录慢查询，或者记录所有查询。通过`db.setProfilingLevel()`设置级别，`2`代表记录所有查询，然后通过`db.system....
MongoDB运行状态、性能监控与分析
mfkzhounb的专栏
10-16 353
mongostat详解 　　mongostat是mongdb自带的状态检测工具，在命令行下使用。它会间隔固定时间获取mongodb的当前运行状态，并输出。如果你发现数据库突然变慢或者有其他问题的话，你第一手的操作就考虑采用mongostat来查看mongo的状态。 　　   　　它的输出有以下几列： 　　inserts/s 每秒插入次数 　　query/s 每秒查询次数 　　...
如何监控慢 SQL？
最新发布
2401_84419325的博客
05-31 1730
引言：在开发和维护数据库驱动的应用程序时，监控慢 SQL 查询是确保系统性能和稳定性的关键一环。慢 SQL 查询可能会导致系统性能下降、资源浪费和用户体验差等问题。因此，及时监控和优化慢 SQL 查询对于保障系统的正常运行和用户满意度至关重要。
记线上mongo慢查询问题排查处理
qq_26678049的博客
03-17 4960
一、事件脉络 1、起因 用户中心收到业务方反馈，第三方登录注册出现频繁dubbo调用超时。 org.apache.dubbo.rpc.RpcException: Failed to invoke the method loginWithThird in the service weli.wormhole.rpc.user.center.api.ILoginNeedPhoneService. Tried 1 times of the providers [10.65.5.0:11090] (1/4) from
Mongo数据库慢查询功能
qq_40907977的博客
03-15 844
简介 使用Mysql数据库的朋友，肯定知道，可以开启慢查询日志，就能捕获Mysql数据库中的慢SQL语句了，那么在Mongo数据库怎么捕获慢查询呢，下面就一步步带大家了解Mongo数据库的慢查询功能的开启和使用的。 开启Mongo数据库的慢查询功能 Mongo数据库的慢查询功能（Profiling）有三个级别 0：代表关闭，不收集任何慢查询 1：收集慢查询数据，默认收集超过100毫秒的慢查询 2：收集任何操作记录数据 默认情况下，Mongo数据库的慢查询功能是关闭的，如果想要知道Mongo数据库是否已经开启
查看mongo数据库的慢查询
weixin_30746117的博客
02-06 82
进入到mongo的shell中，先查看mongo的profile设置情况 Java代码 db.getProfilingLevel() db.setProfilingLevel(0,1000) db.getProfilingLevel() db.setProfilingLevel(0,1000) 0代表关闭，1代表只记录slowlog，这里我们设置成...
spring-mvc-mongo-monitor
07-14
标题“spring-mvc-mongo-monitor”暗示我们关注的是一个关于Spring MVC框架与MongoDB数据库监控的项目或教程。描述中的链接指向了一篇博客文章，但无法在这里直接访问，不过我们可以根据提供的标签来推测讨论的主题...
Mongo 慢SQL查询设置查监控
李逍遥
04-17 1351
Mongo 慢SQL查询设置查监控
MongoDB 查看慢查询级别及慢查询日志
专注数据库、大数据领域干货分享，用严谨的数据技术广交天下朋友。
01-03 5718
如何定位 MongoDB 数据库的慢查询，我想应该是很多刚使用 MongoDB 数据库的朋友最想知道的问题。通过慢查询的定位，可以辅助对 MongoDB 中的 collection 进行优化。MongoDB 数据库的慢查询数据其实存放在一个数据库集合 ( collection ) 中（system.profile），如果你不主动创建 system.profile 这个集合，那这个集合就固定1M大小，当慢查询记录超过1M，就会将历史数据覆盖，循环使用，所以在这里需要根据业务实际情况设置集合大小。
数据库慢查询监控配置
weixin_43865008的博客
08-04 608
MySql慢查询方法介绍 MySql 慢查询可以分析 MySql 语句查询性能问题的时候，可以再 MySql 记录中查询超过指标时间的语句，我们将超过指标时间的 SQL 语句称为 “慢查询”。MySql 自带的慢查询分析工具 mysqldumpslow 可以对慢查询日志进行分析；主要功能是统计sql的执行信息，其中包括： 出现次数（count） 执行最长时间（time） 累计总耗费时间(Time) 等待锁的时间(Lock) 发送给客户端的行总数(Rows) 扫描的行总数(Rows) 开启mysql配置
深入讲解MongoDB的慢日志查询（profile）
09-09
在MySQL中，慢查询日志是经常作为我们优化数据库的依据，那在MongoDB中是否有类似的功能呢?答案是肯定的，那就是MongoDB Database Profiler。下面这篇文章主要给大家介绍了关于MongoDB慢日志查询（profile）的相关资料，需要的朋友可以参考下。
MongoDB慢日志查询分析
BigBoomm的博客
07-19 1244
moved：表明本次update是否移动了硬盘上的数据，如果新记录比原记录短，通常不会移动当前记录，如果新记录比原记录长，那么可能会移动记录到其它位置，这时候会导致相关索引的更新.磁盘操作更多，加上索引更新，会使得这样的操作比较慢.（不过这个选在仅针对引擎是MMAPv1）{ "was" : 1, "slowms" : 100, "ok" : 1 } ---100表示之前的慢查询时间设定值。query:查询的具体语句，如果是insert操作，则会是insert的语句。
mongodb慢查询
翻身咸鱼的博客
07-18 2589
最近mysql同步到mongodb很慢，开始排查问题。 首先想到的是mongodb的问题，那么就要找出它的慢查询日志，证明是mongodb的问题 一、 用那个绿色的工具，robomongo打开，对着某个需要的数据库打开shell（右键open shell），（一定要这样，否者会查到或者设置到别的数据库，导致一直没看到数据） 二、 mongodb有profiling三个级别： 0：关闭，...
关于mongodb慢查询
epeaktop的专栏
10-26 695
1. 开启慢查询　　> db.setProfilingLevel(2); 　　{"was" : 0 , "ok" : 1} 　　上面斜体的级别可以取0，1，2 三个值，他们表示的意义如下： 　　0 – 不开启 　　1 – 记录慢命令 (默认为>100ms) 　　2 – 记录所有命令db.setProfilingLevel( 1 , 10 );记录大于10ms的1.2 启动时的设定方式mong
MySQL慢查询监控
yimenglin的博客
06-09 429
MySQL慢查询监控 参考：The Slow Query Log MySQL提供了慢查询日志来记录执行时间超过long_query_time设置的查询，可用于查找执行时间过长的查询，方便优化工作。 试验环境 操作系统：CentOS Linux release 7.3.1611 (Core) 数据库系统： mysql 8.0.15 相关参数 slow_query_log：0表示禁用日志，1表示启用日志 slow_query_log_file：指定日志文件的保存路径和名称 long_query_time：..
mongo 慢查询配置
小爷欣欣
04-16 1061
1，什么是慢查询： 首先满查询针对的不一定是查询，增删改查都包括，因此，可以理解为一个事务的时间只有超过我们设定的时间（比如100ms）才会打印到mongo日志中，即（master.log，slave.log）。 2，步骤： 进入到mongo命令行，使用admin用户，或local用户 #命令行下设置方式--db.setProfilingLevel(level,slowms) > ...
Mongo数据库慢查询功能_mongo慢查询设置集合大小，电子版已问世
2401_84254296的博客
04-15 613
不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！这里设置的Profiling级别为1，慢查询阈值为500毫秒。这里为了方便测试，将慢查询的级别设置为2。从上面结果可以看到，已经捕获到慢查询了。
MongoDB的慢查询
whp404的博客
05-31 2676
MongoDB的慢查询问题解决思路 慢查询工具帮助我们定位问题sql语句，该工具在运行的实例上收集有关MongoDB的写操作，游标，数据库命令等，可以在数据库级别开启该工具，也可以在实例级别开启（即单独某个集合上开启）。该工具会把收集到的所有都写入到system.profile集合中，该集合是一个capped collection。（即是一个容量固定的集合），更多信息见https...
mongoTemplate模糊查询
02-02
mongoTemplate是Spring Data MongoDB提供的一个操作MongoDB数据库的工具类。它提供了一系列的方法来执行数据库的增删改查操作。 在mongoTemplate中进行模糊查询，可以使用正则表达式来匹配需要查询的字段。具体步骤如下： 1. 创建一个Query对象，用于设置查询条件。 2. 使用Criteria对象设置模糊查询条件，可以使用正则表达式来匹配需要查询的字段。 3. 调用mongoTemplate的find方法，传入Query对象和需要查询的实体类，执行查询操作。 下面是一个示例代码，演示如何在mongoTemplate中进行模糊查询： ```java import org.springframework.data.mongodb.core.MongoTemplate; import org.springframework.data.mongodb.core.query.Criteria; import org.springframework.data.mongodb.core.query.Query; public class MongoTemplateExample { private MongoTemplate mongoTemplate; public List<User> findUsersByKeyword(String keyword) { Query query = new Query(); Criteria criteria = Criteria.where("name").regex(keyword, "i"); // i表示不区分大小写 query.addCriteria(criteria); return mongoTemplate.find(query, User.class); } } ``` 在上述示例中，我们通过`Criteria.where("name").regex(keyword, "i")`设置了一个模糊查询条件，其中"name"是需要查询的字段名，`regex(keyword, "i")`表示使用正则表达式进行匹配，"i"表示不区分大小写。 你可以根据自己的需求修改上述代码，来实现更复杂的模糊查询操作。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值