同步数据_Porter，一款数据同步中间件

概要

Porter始于2017年，提供数据同步功能，但并不仅仅局限于数据同步，在随行付内部广泛使用。主要提供一下功能：

• 数据库准实时同步
• 数据库迁移
• 数据库治理
• 自定义源端、目标端数据同步
• 自定义数据抽取逻辑

核心功能

• 原生支持Oracle|Mysql到Jdbc关系型数据库最终一致同步
• 插件友好化，支持自定义源端消费插件、目标端载入插件、告警插件等插件二次开发。
• 支持自定义源端、目标端表、字段映射
• 支持节点基于配置文件的同步任务配置。
• 支持管理后台同步任务推送，节点、任务管理。提供任务运行指标监控，节点运行日志、任务异常告警。
• 支持节点资源限流、分配。
• 基于Zookeeper集群插件的分布式架构。支持自定义集群插件。

快速开始

从源码编译

git clone https://github.com/sxfad/porter.gitcd portergit checkout 版本gradle build从build/distributions目录查找安装包

配置

配置文档

porter.id=节点编号，在集群中唯一#集群配置porter.cluster.strategy=ZOOKEEPERporter.cluster.client.url=127.0.0.1:2181porter.cluster.client.sessionTimeout=100000#统计指标数据上传目标端链接信息，与manager-cluster搭配使用,当上传到zookeeper时，manager-cluster无需部署。porter