Flink CDC 生产环境常用参数总结
1.参数
1. 基本连接参数
这些参数用于定义如何连接到数据库,是配置的必需项。
参数名称 | 说明 | 示例 |
---|---|---|
connector |
数据库连接器类型,常用 mysql-cdc 。 |
'connector' = 'mysql-cdc' |
hostname |
数据库主机名或 IP 地址。 | 'hostname' = '192.168.1.100' |
port |
数据库端口号,MySQL 通常为 3306 。 |
'port' = '3306' |
username |
用于连接数据库的用户名。 | 'username' = 'root' |
password |
数据库用户的密码。 | 'password' = 'your-password' |
database-name |
需要监控的数据库名称,支持正则表达式。 | 'database-name' = 'production_db' |
table-name |
需要监控的表名称,支持正则表达式。 | 'table-name' = 'user.*' |
2. 数据读取控制参数
这些参数用于控制数据从数据库的读取行为,确保 Flink CDC 的运行效率和行为符合预期。
参数名称 | 说明 | 示例 |
---|---|---|
scan.startup.mode |
定义 Flink 应从哪里开始读取: | 'scan.startup.mode' = 'initial' |
- initial :从表头读取,包括快照 + 增量数据。 |
||
- latest-offset :从最新的增量变更开始读取,跳过快照。 |
||
- specific-offset :从指定 binlog 位置开始读取。 |
||
- timestamp :从指定的时间戳(毫秒)开始读取。 |
||
debezium.snapshot.mode |
定义如何执行初始快照: |