浅谈高性能数据库集群 —— 读写分离

点击上方“芋道源码”,选择“置顶公众号”

技术文章第一时间送达!

源码精品专栏

 

来源:http://t.cn/EZK3vPU

  • 1. 读写分离概述

  • 2. 适用场景

  • 3. 引入的系统复杂度问题


最近学习了阿里资深技术专家李运华的架构设计关于读写分离的教程,颇有收获,总结一下。

本文主要介绍高性能数据库集群读写分离相关理论,基本架构,涉及的复杂度问题以及常见解决方案。

1. 读写分离概述

640?wx_fmt=jpeg
读写分离概述

基本架构图:

640?wx_fmt=jpeg
基本架构图.jpg

2. 适用场景

640?wx_fmt=jpeg
适用场景.png

读写分离不是银弹,并不是一有性能问题就上读写分离,而是应该先优化,例如优化慢查询,调整不合理的业务逻辑,引入缓存查询等只有确定系统没有优化空间后才考虑读写分离集群

3. 引入的系统复杂度问题

问题一 主从复制延迟

640?wx_fmt=jpeg
主从复制延迟.png

问题二 分配机制

如何将读写操作区分开来,然后访问不同的数据库服务器?

解决方案1 客户端程序代码封装实现

基本架构图

640?wx_fmt=jpeg
程序代码封装实现分配基本架构图
640?wx_fmt=jpeg
程序代码封装

业界开源实现

  • Sharding-JDBC 定位为轻量级Java框架,在Java的JDBC层提供的额外服务。 它使用客户端直连数据库,以jar包形式提供服务,无需额外部署和依赖,可理解为增强版的JDBC驱动,完全兼容JDBC和各种ORM框架。

640?wx_fmt=jpeg
Sharding-JDBC基本架构图
  • 淘宝TDDL 淘宝根据自身业务需求研发了 TDDL ( Taobao Distributed Data Layer )框架,主要用于解决 分库分表场景下的访问路由(持久层与数据访问层的配合)以及异构数据库之间的数据同步 ,它是一个基于集中式配置的 JDBC DataSource 实现,具有分库分表、 Master/Salve 、动态数据源配置等功能。

640?wx_fmt=jpeg
淘宝TDDL基本架构图

解决方案2 服务端中间件封装

基本架构图

640?wx_fmt=jpeg
服务端中间件封装实现分配基本架构图
640?wx_fmt=jpeg
服务端中间件封装

业界开源实现

  • MySQL官方推荐的MySQL Router

640?wx_fmt=jpeg
MySQL Router架构图

MySQL Router是轻量级的中间件,可在应用程序和任何后端MySQL服务器之间提供透明路由。它可以用于各种各样的用例,例如通过有效地将数据库流量路由到适当的后端MySQL服务器来提供高可用性和可伸缩性。可插拔架构还使开发人员能够扩展MySQL Router以用于自定义用例。

基于MySQL Router可以实现读写分离,故障自动切换,负载均衡,连接池等功能。

  • MySQL官方提供的MySQL Proxy

    640?wx_fmt=jpeg
    MySQL Proxy
  • 360开源的Atlas

640?wx_fmt=jpeg
Atlas架构图形象表示
640?wx_fmt=jpeg
Atlas总体架构

Atlas是由平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它是在mysql-proxy的基础上,对其进行了优化,增加了一些新的功能特性。

常见的开源数据库中间件对比

功能Sharding-JDBCTDDLAmoebaCobarMyCat
基于客户端还是服务端客户端客户端服务端服务端服务端
分库分表
MySQL交互协议JDBC DriverJDBC Driver前端用NIO,后端用JDBC Driver前端用NIO,后端用BIO前后端均用NIO
支持的数据库任意任意任意MySQL任意

参考

从0开始学架构——李运华

Mycat原理解析-Mycat架构分析




如果你对 Dubbo / Netty 等等源码与原理感兴趣,欢迎加入我的知识星球一起交流。长按下方二维码噢

640?

目前在知识星球更新了《Dubbo 源码解析》目录如下:

01. 调试环境搭建
02. 项目结构一览
03. 配置 Configuration
04. 核心流程一览

05. 拓展机制 SPI

06. 线程池

07. 服务暴露 Export

08. 服务引用 Refer

09. 注册中心 Registry

10. 动态编译 Compile

11. 动态代理 Proxy

12. 服务调用 Invoke

13. 调用特性 

14. 过滤器 Filter

15. NIO 服务器

16. P2P 服务器

17. HTTP 服务器

18. 序列化 Serialization

19. 集群容错 Cluster

20. 优雅停机

21. 日志适配

22. 状态检查

23. 监控中心 Monitor

24. 管理中心 Admin

25. 运维命令 QOS

26. 链路追踪 Tracing

... 一共 69+ 篇

目前在知识星球更新了《Netty 源码解析》目录如下:

01. 调试环境搭建
02. NIO 基础
03. Netty 简介
04. 启动 Bootstrap

05. 事件轮询 EventLoop

06. 通道管道 ChannelPipeline

07. 通道 Channel

08. 字节缓冲区 ByteBuf

09. 通道处理器 ChannelHandler

10. 编解码 Codec

11. 工具类 Util

... 一共 61+ 篇


目前在知识星球更新了《数据库实体设计》目录如下:


01. 商品模块
02. 交易模块
03. 营销模块
04. 公用模块

... 一共 17+ 篇


目前在知识星球更新了《Spring 源码解析》目录如下:


01. 调试环境搭建
02. IoC Resource 定位
03. IoC BeanDefinition 载入

04. IoC BeanDefinition 注册

05. IoC Bean 获取

06. IoC Bean 生命周期

... 一共 35+ 篇


源码不易↓↓↓

点赞支持老艿艿↓↓


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值