mysql redis binlog_Mysql通过binlog同步redis

实现过程

通过canal解析binlog，canal主要模拟了mysql的Slave向Master发送请求，当mysql有增删改查时则会出发请求将数据发送到canal服务中，canal将数据存放到内存，直到客户端程序(canal服务端和客户端程序都是由java编写,且客户端逻辑由我们借助com.alibaba.otter.canal工具包下的类完成开发)通过发布-订阅这种模式消费canal服务中的数据。

配置mysql

1.在my.ini文件里的【mysqld】下添加如下：

image

重启mysql，注意如果是文件名是my-default.ini要改名成my.ini

2.创建mysql用户，并配置canal权限，进入到mysql程序中，输入下列命令，创建用户，(用户名和密码都是：canal)：

CREATE USER canal IDENTIFIED BY 'canal';

GRANT SELECT, REPLICATION SLAVE, REPLICATION CLIENT ON数据库名.表名 TO 'canal'@'%';

-- GRANT ALL PRIVILEGES ON数据库名.表名 TO 'canal'@'%' ;

FLUSH PRIVILEGES;

下载并配置启动canal：

2.配置canal：主要配置的文件有两处，canal/conf/example/instance.properties和 canal/conf/canal.properties .下面对这两处做修改：

cd canal/conf/example/目录下对 instance.properties进行修改：

image

cd canal/conf/目录下对 canal.properties 进行修改：

image

3.启动canal：双击/bin/startup.bat文件启动

Java连接canal执行同步操作:

1.在maven项目中中加载canal和redis依赖包:

com.alibaba.otter

canal.client

1.0.12

redis.clients

jedis

2.4.2

2.建立canal客户端，从canal中获取数据，并将数据更新至Redis:

package canal;

import java.net.InetSocketAddress;

import java.util.List;

import com.alibaba.fastjson.JSONObject;

import com.alibaba.otter.canal.client.CanalConnector;

import com.alibaba.otter.canal.protocol.Message;

import com.alibaba.otter.canal.protocol.CanalEntry.Column;

import com.alibaba.otter.canal.protocol.CanalEntry.Entry;

import com.alibaba.otter.canal.protocol.CanalEntry.EntryType;

import com.alibaba.otter.canal.protocol.CanalEntry.EventType;

import com.alibaba.otter.canal.protocol.CanalEntry.RowChange;

import com.alibaba.otter.canal.protocol.CanalEntry.RowData;

import com.alibaba.otter.canal.client.*;

/**

* @Author: daijunchen