mikewuhao的博客

背景阿里巴巴 B2B 公司为解决杭州和美国双机房部署，存在跨机房同步的业务需求 ，从 2010 年开始，开始尝试数据库日志解析，获取增量变更进行同步，由此衍生出了增量订阅和消费业务，从此开启一段新纪元。是什么canal [kə’næl]，译意为水道/管道/沟渠主要用途是基于 MySQL 数据库增量日志解析，提供增量数据订阅和消费官方Wikihttps://github.com/alibaba/canal/wiki原理mysql主备复制canal的原理和mysql的主备复制原理相似，先提下m

1.mysql配置授予用户canal权限当前的 canal 支持源端 MySQL 版本包括 5.1.x , 5.5.x , 5.6.x , 5.7.x , 8.0.x我的Linux服务器安装的MySQL服务器是5.7版本。MySQL的安装这里就不演示了，比较简单，网上也有很多教程。这里本人用MYSQL的root用户授权canal的权限,-- 使用命令登录：mysql -u root -p-- 授权 *.*表示所有库grant SELECT, REPLICATION SLAVE, REPLIC

Amazon S3介绍Amazon Simple Storage Service (Amazon S3) 是一种对象存储，它具有简单的 Web 服务接口，可用于在 Web 上的任何位置存储和检索任意数量的数据。它能够提供 99.999999999% 的持久性，并且可以在全球大规模传递数万亿对象。S3的基本数据结构S3的数据存储结构非常简单，就是一个扁平化的两层结构：一层是存储桶（Bucket，又称存储段），另一层是存储对象（Object，又称数据元）。存储桶是S3中用来归类数据的一个方式，它是数据存储