flink-cdc 设置

一. SqlServer-CDC 设置

 1. 查看库表是否启动 CDC

-- 查看数据库是否启用cdc
SELECT name,is_cdc_enabled FROM sys.databases WHERE is_cdc_enabled = 1;

-- 查看当前数据库表是否启用cdc
SELECT name,is_tracked_by_cdc FROM sys.tables WHERE is_tracked_by_cdc = 1;

 2. 数据库启用和禁用 CDC

-- 对当前数据库启用 CDC
USE MyDB 
GO
EXECUTE sys.sp_cdc_enable_db;
GO
-- 对当前数据库禁用 CDC
USE MyDB  
GO  
EXEC sys.sp_cdc_disable_db  
GO  

 3. 数据库表启用和禁用 CDC

-- 启用
USE MyDB  
GO  
EXEC sys.sp_cdc_enable_table  
@source_schema = N'dbo',  
@source_name   = N'MyTable',  
@role_name     = NULL,  
@supports_net_changes = 1  
GO 
-- 禁用
USE MyDB  
GO  
EXEC sys.sp_cdc_disable_table  
@source_schema = N'dbo',  
@source_name   = N'MyTable',  
@capture_instance = N'dbo_MyTable'  
GO  

 4. 查看表 CDC 功能是否启用

SELECT  name ,
        is_tracked_by_cdc ,
        CASE WHEN is_tracked_by_cdc = 0 THEN 'CDC功能禁用'
             ELSE 'CDC功能启用'
        END 描述
FROM    sys.tables;

 5. 开启授权

ALTER AUTHORIZATION ON DATABASE::[MyDB] TO [sa]

二、 MySql-CDC 设置

CDC（Change Data Capture），即数据变更抓取，通过为源端数据源开启CDC，开启Binlog模式CDC功能，前提条件，MySQL数据库为5.7或以上版本。

查询MySQL数据库是否开启了Binlog。

show variables like 'log_bin';
show variables like '%binlog_format%';
show variables like '%binlog_row_image%';

若变量log_bin的值为“OFF”，则说明Binlog未开启，继续执行下一步。
若变量log_bin的值为“ON”，则说明Binlog已开启，继续执行以下SQL命令，检查相关参数的配置是否符合要求。
变量binlog_format的值应该为“ROW”，变量binlog_row_image的值应该为“FULL”。如果满足要求，直接跳到2，否则继续执行下一步

 在配置文件中增加如下配置，开启Binlog。

server-id = 123
log_bin = mysql-bin
binlog_format = row
binlog_row_image = full
expire_logs_days = 10
gtid_mode = on
enforce_gtid_consistency = on


server-id的值应为大于1的整数，请根据实际规划设置，并且在创建数据集成任务时设置的“Server Id”值需要此处设置的值不同。
expire_logs_days为Binlog日志文件保留时间，超过保留时间的Binlog日志会被自动删除，应保留至少2天的日志文件。
“gtid_mode = on”和“enforce_gtid_consistency = on”仅当MySQL的版本大于等于5.6.5时才需要添加，否则删除这两行内容。