MongoDB - mongo 的数据监听

目录

一、 基于主从复制机制的oplog进行信息获取

1-1 mongodb单实例开启oplog

1-2 oplog的基本操作

1-3 基于pymongo的简单操作

1-3-1 oplog 对象获取

1-3-2 mongo 时间戳处理

1-3-3 多条件查询

1-4 Python 监控脚本实现

1-5 Tornado WS + Oplog watcher 的简单实现

二、 基于自定义log进行监听

三、在数据进行存储的时候触发后续执行（耦合）

---

一、 基于主从复制机制的oplog进行信息获取

1-1 mongodb单实例开启oplog

MongoDB 单机开启Oplog

OPLOG 官方文档

replication:
  oplogSizeMB: 50
  replSetName: rs

rs.initiate({ _id: "副本集名称", members: [{_id:0,host:" 服务器的IP : Mongo的端口号 "}]})
​
rs.initiate({ _id: "rs", members: [{_id:0,host:"127.0.0.1:27017"}]})

！！注意：如果数据库的数据量不大，并且长时间初始这种过渡状态（SECONDARY或OTHER），去看实例的日志，也显示无进展，此时可以考虑重启服务。

1-2 oplog的基本操作

• rs.printReplicationInfo() 查看 oplog 的状态，输出信息包括 oplog 日志大小，操作日志记录的起始时间。
• db.getReplicationInfo() 可以用来查看oplog的状态、大小、存储的时间范围。