Sharding-Proxy——分库分表+读写分离

一、简介

sharding-proxy定位为透明化的数据库代理端，提供封装了数据库二进制协议的服务端版本，用于完成对异构语言的支持。 目前先提供MySQL/PostgreSQL版本，它可以使用任何兼容MySQL/PostgreSQL协议的访问客户端(如：MySQL Command Client, MySQL Workbench, Navicat等)操作数据，对DBA更加友好。

• 向应用程序完全透明，可直接当做MySQL/PostgreSQL使用。
• 适用于任何兼容MySQL/PostgreSQL协议的的客户端。
  

	Sharding-JDBC	Sharding-Proxy
数据库	任意	MySQL
连接消耗数	高	低
异构语言	JAVA	任意
性能	损耗低	损耗略高
无中心化	高是	否
静态入口	无	有

——摘自官方文档

二、实现分库分表和读写分离

（一）准备工作

服务器	名称	数据库	表	角色
192.168.30.130	server1	orders	orders	独立
192.168.30.131	server2	orders	orders,user	独立
192.168.30.132	server3	test	t_user	主
192.168.30.133	server4	test	t_user	从（只读）

目标：

• user表全部存储到server2的orders数据库。
• orders表根据customer_id进行判断，偶数存放在server1中，奇数存放在server2中
• t_user表存储到主从server3和server4的test数据库中，其中server3的test为主库，server4的test为从库（只读），实现读写分离。

（二）安装配置

到官方网站下载sharding-jdbc的二进制安装包，本例使用4.1.1版本。

在/opt目录解压。
修改conf文件夹下面的配置文件：
server.yaml:

 authentication:
   users:
     root:
       password: 123456
     sharding:
       password: sharding
       authorizedSchemas: sharding_db

config-sharding.yaml:

######################################################################################################
#
# If you want to connect to MySQL, you should manually copy MySQL driver to lib directory.
#
######################################################################################################
schemaName: sharding_db
#
dataSources:
# server1
  ds_0:
    url: jdbc:mysql://192.168.30.130:3306/orders?serverTimezone=GMT%2B8&useSSL=false
    username: root
    password: root
    connectionTimeoutMilliseconds: 30000
    idleTimeoutMilliseconds: 60000
    maxLifetimeMilliseconds: 1800000
    maxPoolSize: 50
  #server2
  ds_1:
    url: jdbc:mysql://192.168.30.131:3306/orders?serverTimezone=GMT%2B8&useSSL=false
    username: root
    password: root
    connectionTimeoutMilliseconds: 30000
    idleTimeoutMilliseconds: 60000
    maxLifetimeMilliseconds: 1800000
    maxPoolSize: 50
 # server3 主
  ds_m_0:
    url: jdbc:mysql://192.168.30.132:3306/test?serverTimezone=GMT%2B8&useSSL=false
    username: root
    password: root
    connectionTimeoutMilliseconds: 30000
    idleTimeoutMilliseconds: 60000
    maxLifetimeMilliseconds: 1800000
    maxPoolSize: 50
  # server4 从
  ds_s_0:
    url: jdbc:mysql://192.168.30.133:3306/test?serverTimezone=GMT%2B8&useSSL=false
    username: root
    password: root
    connectionTimeoutMilliseconds: 30000
    idleTimeoutMilliseconds: 60000
    maxLifetimeMilliseconds: 1800000
    maxPoolSize: 50

shardingRule:
  tables:
  # orders表，根据customer_id判断分表的策略
    orders:
      actualDataNodes: ds_${0..1}.orders
      databaseStrategy:
        inline:
          shardingColumn: customer_id
          algorithmExpression: ds_${customer_id % 2}
# user表，存放在ds_1即server2的user表中
    user:
      actualDataNodes: ds_$->{1}.user
 # t_user，使用读写分离进行读和写操作，规则命名为m_s_0(见下面读写分离规则配置)
    t_user:
      actualDataNodes: m_s_$->{0}.t_user
#读写分离规则
  masterSlaveRules:
    m_s_0:
      masterDataSourceName: ds_m_0
      slaveDataSourceNames: [ds_s_0]

• 按照提示，需要将mysql驱动放到lib目录下,本人放置了mysql-connector-java-5.1.47.jar，但是还是无法在shell窗口访问sharding-proxy，使用图形化客户端工具可以访问。。。待查

在bin目录下，启动sharding-proxy：

[root@server3 bin]# ./start.sh 
Starting the Sharding-Proxy ...
The classpath is .:..:/opt/sharding-proxy-4.1.1/lib/*:/opt/sharding-proxy-4.1.1/lib/*:/opt/sharding-proxy-4.1.1/ext-lib/*
Please check the STDOUT file: /opt/sharding-proxy-4.1.1/logs/stdout.log
[root@server3 bin]# pwd
/opt/sharding-proxy-4.1.1/bin

默认端口为3307

（三）验证

使用客户端访问：

1. 分库

insert  into user (id, name) values (1,'a');
insert  into user (id, name) values (2,'b');

全部存储在server2的orders库的user表中。

2. 分表

insert into orders (id, order_type,customer_id,amount) values (1,100,100,1000);
insert into orders (id, order_type,customer_id,amount) values (2,101,101,2000);
insert into orders (id, order_type,customer_id,amount) values (3,100,102,3000);
insert into orders (id, order_type,customer_id,amount) values (4,101,103,4000);

customer_id为100和102的存储到server1中，customer_id为101和103的存储到server2中

3. 读写分离

insert into t_user (uid,uname) values (1,@@hostname);

server3中的数据为1-server3；server4中的数据为1-server4，写操作通过server3实现（server4只读模式）;
查询：

select * from t_user;

获取到server4中的数据，读操作通过server4实现。