Debezium-mysql开启ssl

已于 2022-09-29 17:03:57 修改
阅读量845 收藏
点赞数
分类专栏： Debezium(CDC) 文章标签： mysql ssl 数据库 etl
于 2022-09-29 15:41:28 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yiqian1989/article/details/127107525
版权
本文介绍了如何为Debezium-mysql开启SSL连接，包括将源库的ca.pem导入到truststore，以及设置Debezium source connector的相关参数，确保安全的数据库传输。
摘要由CSDN通过智能技术生成

Debezium-mysql开启ssl

主要讲解debezium怎么配置ssl，至于mysql怎么开启ssl功能请自行百度

如何导入源库的ca.pem到truststore

开启源库和debezium之间的ssl传输需要准备好源库的ca.pem且要把源库的ca.pem导入到debezium所在机器的truststore中。

源库的ca.pem需要导入kafka-connect服务所在机器的truststore中。

采用keytool命令导入ca.pem到truststore

keytool -importcert -alias MySQLCACert -file ca.pem -keystore truststore1 -storepass 123456

参数说明：
-importcert：告诉keytool要导入cert
-alias：证书的别名，不能重名
-file: 要导入的证书文件

了解本专栏 订阅专栏 解锁全文 超级会员免费看
yiqian1989
关注
专栏目录
订阅专栏
Debezium报错处理系列之九十四： javax.net.ssl.SSLHandshakeException: Remote host terminated the handshake
zhengzaifeidelushang的博客
10-10 2347
Debezium报错处理系列之九十四： javax.net.ssl.SSLHandshakeException: Remote host terminated the handshake
Debezium系列之：debezium同步mysql数据库数据到kafka集群
zhengzaifeidelushang的博客
07-27 872
debezium同步mysql数据库数据到kafka集群 一、修改connect-distributed.sh配置 #!/bin/bash #打开JMX监控 export JMX_PORT=9010 #JVM参数配置优化 export KAFKA_HEAP_OPTS="-Djava.security.auth.login.config=/moudle/debezium/kafka_2.13-2.7.0/config/connect-jaas.conf -Xms28G -Xmx28G -XX:NewSiz
debezium mysql_Debezium初试
weixin_29281941的博客
03-03 719
向导地址1.启动kafka connector$ docker run -it --rm --name connect -p 8083:8083 -e GROUP_ID=1 -e CONFIG_STORAGE_TOPIC=my_connect_configs -e OFFSET_STORAGE_TOPIC=my_connect_offsets -e STATUS_STORAGE_TOPIC=my_...
Debezium日常分享系列之：使用 Debezium 连接器实现密钥外部化
zhengzaifeidelushang的博客
07-10 1048
Debezium日常分享系列之：使用 Debezium 连接器实现密钥外部化
Debezium系列之：发布Debezium 2.3.0.Final
zhengzaifeidelushang的博客
06-24 741
- Kubernetes 的 Debezium 服务器运营商 - 新的通知子系统 - 具有新通道的新型可扩展信号子系统 - JMX 信号和通知集成 - 新的 JDBC 存储模块 - PostgreSQL 流式传输的恰好一次传送 - PostgreSQL 副本身份更改 - Oracle RAC 改进
Debezium发布历史13
大蚊子
12-19 942
原文地址： https://debezium.io/blog/2017/02/22/Debezium-at-WePay/使用 MySQL、Debezium 和 Kafka 实时流式传输数据库2017 年 2 月 22 日 作者： 克里斯·里科米尼mysql欢迎关注留言，我是收集整理小能手，工具翻译，仅供参考，笔芯笔芯.这篇文章最初出现在WePay Engineering 博客上。变更数据捕获已经存在了一段时间，但最近的一些技术发展赋予了它新的生命。
Debezium分享系列之：Debezium2.6稳定版本设置SQL Server数据库
zhengzaifeidelushang的博客
04-24 315
为了让 Debezium 从 SQL Server 表捕获更改事件，具有必要权限的 SQL Server 管理员必须首先运行查询以在数据库上启用 CDC。然后，管理员必须为希望 Debezium 捕获的每个表启用 CDC。应用 CDC 后，它会捕获提交给启用了 CDD 的表的所有 INSERT、UPDATE 和 DELETE 操作。然后 Debezium 连接器可以捕获这些事件并将它们发送到 Kafka 主题。
Debezium + kafka connect SASL实现sqlserver CDC
最新发布
风中落叶
05-13 536
需要在connect的配置文件connect-distributed.properties和插件的配置文件里同时添加相关的配置项。在项目中使用SASL_PLAINTEXT协议配置了用户名密码，启动connect的时候，一直报disconnect。启动的时候一直报错授权失败,或者是disconnected。
Debezium分享系列之：Debezium2.6稳定版本Oracle数据库Debezium Connector的属性参数详解
zhengzaifeidelushang的博客
04-18 518
可以通过将值分配给一组以 schema.history.internal. Producer.* 和 schema.history.internal.consumer.* 前缀开头的传递配置属性来定义 Kafka 生产者和消费者客户端的配置。Debezium 提供了一组 schema.history.internal.* 属性，用于控制连接器如何与架构历史主题交互。与数据库模式历史客户端的传递属性的情况一样，Debezium 在将属性传递到数据库驱动程序之前会从属性中去除前缀​​。下表描述了通知属性。
Debezium connector for MySQL 配置部署
xuejianxinokok的专栏
05-10 3667
本文的上班部分介绍了基本原理和基本概念，请参考 本文的上半部分: Debezium connector for MySQL 基本概念 5. 部署 要部署 Debezium MySQL 连接器，您需要安装 Debezium MySQL 连接器插件程序，配置连接器，然后通过将其配置添加到 Kafka Connect 来启动连接器。 先决条件 已安装Apache Zookeeper、Apache Kafka和Kafka Connect。 MySQL 服务器已安装并设置为与 Debezium 连接器一起使用
debezium获取mysql binlog通过kafka实现mysql同步
pioneer的博客
08-22 3172
目标是实现mysql通过binlog的同步 安装confluent 下载地址地址 解压tar -zxvf confluent-5.1.2-2.11.tar.gz 进入到confluent中 快速启动 ZooKeeper,Kafka,Schema Registry,Control Center,Kafka Connect,Kafka REST Proxy,KSQL。 ./bin/conflue...
Debezium同步之Debezium日志记录
Auspicious航的博客
07-11 934
目录 前言 日志记录概念记录器日志级别附加器 了解默认日志记录配置 配置日志记录通过配置记录器设置日志记录级别使用 Kafka Connect REST API 动态设置日志记录级别 使用映射的诊断上下文设置日志记录级别 在Debezium 容器镜像中配置日志级别Debezium 在其连接器中内置了广泛的日志记录，您可以更改日志记录配置以控制这些日志语句中的哪些出现在日志中以及这些日志的发送位置。Debezium（以及 Kafka、Kafka Connect 和 Zookeeper）使用
Debezium报错处理系列五：Authentication failed: Invalid username or password\n
zhengzaifeidelushang的博客
12-31 2957
Debezium报错处理系列五：org.apache.kafka.common.errors.SaslAuthenticationException: Authentication failed: Invalid username or password\n一、debezium报错二、报错产生原因三、报错解决方法 一、debezium报错 org.apache.kafka.common.errors.SaslAuthenticationException: Authentication failed: I
Debezium 将MongoDB同步到kafka（待完善验证）
vkingnew 的技术博客
04-09 2074
-- 登录mongo查询： ./mongo --host 10.19.166.249 --port 27017 testrs:PRIMARY> rs.status() 配置文件： #vim mongodb.properties name=mongo connector.class=io.debezium.connector.mongodb.MongoDbConnector mongodb...
debezium postgresql 连接示例
Kafka_yx的博客
11-28 3793
postgresql 连接示例连接器属性 查看pgsql已有的插槽 select * from pg_replication_slots; 指定表(迁移 postgres 数据库下的 test 表，多个表需要用 逗号分隔 ) curl -i -X POST -H "Accept:application/json" -H "Content-Type:application/json" h...
必需的 Debezium MySQL 连接器配置属性
weixin_43564627的博客
07-21 4569
必需的 Debezium MySQL 连接器配置属性 官网地址： https://debezium.io/documentation/reference/1.5/connectors/mysql.html name 连接器的唯一名称。尝试使用相同名称再次注册失败。所有 Kafka Connect 连接器都需要此属性。 connector.class 连接器的 Java 类的名称。始终io.debezium.connector.mysql.MySqlConnector为 MySQL 连接器指定 。 tasks
Debezium:mysql connector使用
高矮
11-19 5106
前言： mysql connector支持功能： 1、数据流式处理 2、支持多种模式mysql集群的数据处理 3、支持流复制异常中断后的数据自动恢复 4、支持DDL级别操作的数据流处理 备注：本文以kafka单节点开发环境为例，多节点分布式连接器相似，参考：https://blog.csdn.net/u012551524/article/details/83349324 插件版本： ...
Debezium的MySQL连接器的工作原理
码农无双的博客
08-12 1万+
原文参考官网：https://debezium.io/docs/connectors/mysql/#collapse4        本文将深入Debezium的MySQL连接器（一种kafka connector）的工作细节，包括跟踪表结构（structure of t
不同格式证书导入keystore方法
热门推荐
王浩的技术博客
08-28 2万+
简介 Java自带的keytool工具是个密钥和证书管理工具。它使用户能够管理自己的公钥/私钥对及相关证书，用于（通过数字签名）自我认证（用户向别的用户/服务认证自己）或数据完整性以及认证服务。它还允许用户储存他们的通信对等者的公钥（以证书形式）。 keytool 将密钥和证书储存在一个所谓的密钥仓库（keystore）中。缺省的密钥仓库实现将密钥仓库实现为一个文件。它用口令来保护私钥
debezium-json
08-25
Debezium 是一个开源的分布式平台，用于从数据库中捕获和推送实时变化数据（Change Data Capture, CDC）。Debezium 提供了将数据库中的变化数据转换为 JSON 格式的功能，这个功能通常被称为 Debezium JSON。 使用 Debezium JSON，你可以轻松地将数据库中的变化捕获为结构化的 JSON 消息，并将其推送到消息队列、数据湖或其他目标系统中进行处理。这使得你能够实时地监控和分析数据库中的变化，以便进行实时的数据流处理、数据仓库的构建等。 Debezium 提供了针对各种常见数据库（如 MySQL、PostgreSQL、MongoDB 等）的连接器，这些连接器可以轻松地将数据库中的变化数据转换为 JSON 格式，并提供了灵活的配置选项以满足不同的需求。 通过使用 Debezium JSON，你可以构建可靠且灵活的数据流处理系统，以满足实时数据集成和分析的需求。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

yiqian1989

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值