Debezium系列之：使用Debezium接入MongoDB数据库数据，赋予账号数据采集的权限

最新推荐文章于 2024-04-25 18:14:03 发布
最新推荐文章于 2024-04-25 18:14:03 发布
阅读量818 收藏 1
点赞数 1
分类专栏： debezium 文章标签： Debezium系列 MongoDB数据库 赋予账号数据采集的权限
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhengzaifeidelushang/article/details/129578100
版权
debezium 专栏收录该内容
332 篇文章 304 订阅 ¥99.90 ¥299.90
订阅专栏
本文介绍了如何在MongoDB中为账号赋予数据采集权限，以避免因权限不足导致的数据库连接问题。内容包括创建admin用户、角色，设置数据采集账号的权限，部署MongoDB的Debezium connector，以及验证数据采集和Kafka Topic的消费。同时，提供了MongoDB数据库从入门到精通系列文章的链接。
摘要由CSDN通过智能技术生成

Debezium系列之：使用Debezium接入MongoDB数据库数据，赋予账号数据采集的权限

如下图所示，成功运行MongoDB数据库的Debezium Connector
在这里插入图片描述

一、需求背景

  • 当MongoDB账号无数据采集的权限，会导致MongoDB debezium connector连接上MongoDB数据库后，由于账号权限不够，会反复尝试连接MongoDB数据库，从而造成MongoDB数据库的连接数一直增加，甚至导致MongoDB数据库挂掉。
  • 因此，需要给MongoDB数据库账号赋予足够的权限

查询MongoDB数据库连接数的方法如下所示：

db.serverStatus().connections
{
   
        "current" : 21,
        "available" : 19979,
了解本专栏 订阅专栏 解锁全文
最笨的羊羊
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
Debezium系列之：debezium对mysql8数据库tinyint unsigned的支持
zhengzaifeidelushang的博客
12-12 435
Debezium系列之：debezium对mysql8数据库tinyint unsigned的支持
Debezium系列之：Debezium2.X版本Mysql数据库、Sqlserver数据库、MongoDB数据库debezium connector最新完整的参数配置，并详细介绍参数含义
zhengzaifeidelushang的博客
04-29 429
Debezium系列之：Debezium2.X版本Mysql数据库、Sqlserver数据库、Mongodb数据库debezium connector最新完整的参数配置，并详细介绍参数含义
用于 MongoDB 的 Debezium 连接器
三毛码代码
07-16 1202
MongoDB的复制机制提供了冗余和高可用性，是在生产环境中运行MongoDB的首选方式。MongoDB连接器捕获副本集或分片集群中的更改。MongoDB副本集由一组服务器组成，这些服务器都具有相同数据的副本，并且复制可确保客户端对副本集主节点上的文档所做的所有更改都正确应用于另一个副本集的服务器，称为辅助节点。MongoDB复制的工作原理是让主节点在其oplog（或操作日志）中记录更改，然后每个辅助节点读取主节点的oplog并按顺序将所有操作应用于自己的文档。快照。...
mongodb使用debezium
最新发布
weixin_44728369的博客
04-25 1243
服务器上需要安装jdk11。
《Debezium系列》Debezium-Connector-MongoDB副本集
铛铛当的博客
01-20 3888
目录 一、简介 1.1 起因 1.2 Debezium 1.3 使用场景 2. 搭建实践 2.1 版本说明 2.2 芒果（mongodb）DB配置 2.3 kafka connect配置 2.4 提交 2.5 测试 3. 总结 4. 后记 一、简介 1.1 起因 这段时间在进行数据库的实时接入方面的工作，并且要求在kafka上进行数据的发布和接入，所以在领导的介绍下g...
python连接mongodb数据库操作数据示例
01-19
作者： wyh草样 ... 1、数据库配置类 MongoDBConn.py #encoding=utf-8 ... servers = mongodb://localhost:27017 def connect(self): self.conn = pymongo.Connection(self.servers) def close(self):
python连接mongodb操作数据示例(mongodb数据库配置类)
12-23
复制代码 代码如下:#encoding=utf-8”’Mongo Conn连接类”’import pymongoclass DBConn: conn = None servers = “mongodb://localhost:27017” def connect(self): self.conn = pymongo.Connection(self....
Python简单连接MongoDB数据库的方法
12-23
本文实例讲述了Python连接MongoDB数据库的方法。分享给大家供大家参考，具体如下...client = MongoClient('mongodb://tanteng:123456@localhost:27017/') db = client.js_send_excel post = {"author": "Xiaofeng", "te
浅析MongoDB数据库的海量数据存储应用
03-03
本文重点描述作为NoSQL之一MongoDB数据库在海量数据存储方面的应用。NoSQL,全称是“NotOnlySql”，指的是非关系型的数据库。这类数据库主要有这些特点：非关系型的、分布式、开源的、水平可扩展的。原始目的是为了大...
Node.js连接MongoDB数据库
01-06
首先要启动MongoDB服务器 先找到你的mongoDb安装目录，我的如下： 就在bin文件夹下创建一个data文件夹，data内包含两个空文件夹，如下： 接着回到bin文件夹处，按住shift键，右击bin文件夹，在此处打开命令行 ...
Debezium日常分享系列之：Debezium and TimescaleDB
zhengzaifeidelushang的博客
01-16 1441
然后，从数据库读取的原始消息会使用存储在 Kafka Connect 标头中的元数据进行丰富，从而创建物理数据和 TimescaleDB 逻辑结构之间的关系。这些消息包含两个标头 debezium_timescaledb_chunk_table:_hyper_1_1_chunk、debezium_timescaledb_chunk_schema:_timescaledb_internal，它们描述了逻辑超表名称与从中捕获它们的物理源表之间的映射。压缩后的数据被捕获并存储在 Kafka 主题中。
Debezium日常分享系列之：设置MySQL数据库以支持数据实时采集
zhengzaifeidelushang的博客
03-21 1205
Debezium日常分享系列之：设置MySQL数据库以支持数据实时采集 Debezium技术专栏。
kafka-connect-distribute 模式，使用 debezium source 同步 MongoDB 集群到 Kafka
bao_since的博客
05-10 2528
从flink社区看到 MongoDB ->Debezium-> Kafka 作为 Flinkdatasource 的方案，试着搭了一套。 MongoDB 使用副本+分片 Debezium 作为 Kafka Connect 的插件，首先配置 Kafka Connect，选择的是 connect-distribute 模式，这里踩到了一个坑， 因为我的集群 java 版本还在 7...
Debezium日常分享系列之：Debezium2.4版本之用于 MongoDB的Debezium 连接器
zhengzaifeidelushang的博客
10-24 855
Debezium 的 MongoDB 连接器跟踪 MongoDB 副本集或 MongoDB 分片集群以获取数据库和集合中的文档更改，并将这些更改记录为 Kafka 主题中的事件。连接器自动处理分片集群中分片的添加或删除、每个副本集成员资格的更改、每个副本集中的选举以及等待通信问题的解决。
Debezium迁移和同步Oracle数据
fayeestone的博客
10-19 4984
Debezium迁移和同步Oracle数据概览特点部署先决条件部署流程快照connector默认流程--创建初始快照即席快照增量快照算法实现kafka topic对事务的支持数据变化事件keyvalue 概览 Debezium是RedHat开源的一个将多种数据源实时变更数据捕获，形成数据流输出的开源工具。当前支持MySQL、PostgreSQL、SQL Server、Oracle、Db2等常用数据库。Debezium Oracle connector是基于kafka conect的一种实现，用于捕获并记录O
基于Debezium 实时同步Mongodb 数据
qq_34741911的博客
09-10 2489
1.1 Debezium 介绍 Debezium 是一个分布式的平台 ，注册source connector 用于源集群和kafka进行连接， 捕获原集群数据库中的更改记录，并将更改记录进行解析成相应的格式，以消息的形式保存到kafka中， 也可以注册sink connector 用于kafka 与 目的集群进行连接，消费kafka中的数据记录，并解析成数据库中能插入的sql语句。 下图为Debezium的整个架构，Debezium以插件的形式，部署在 Kafka Connect 上，Kafka Co
Debezium日常分享系列之：Debezium2.5稳定版本之MySQL连接器配置示例和Connector参数详解
zhengzaifeidelushang的博客
03-23 2262
Debezium日常分享系列之：Debezium2.5稳定版本之MySQL连接器配置示例和Connector参数详解 Debezium技术专栏。
homelife家居网站的MongoDB数据库数据信息及新建数据库操作。
接下来对品牌集合进行操作，同样先使用了db.getCollection("brands").drop()语句清空了该集合中的所有数据，然后使用db.createCollection("brands")语句创建了一个名为"brands"的集合，再插入了一条品牌信息记录，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

最笨的羊羊

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值