项目中sharding-jdbc的实际应用

简单介绍下最近项目中遇到的场景:敝司最近发展酒店业务,需要从各个供应商接入酒店数据、报价等信息,国内现有正宗酒店大约80万,每个酒店有很多房型(标间、大床间 豪华间等),每个房型有会有多个销售套餐(如含早不含早、有无有窗、带不带优惠等),每个供应商都会有自己的销售套餐和对应的报价(一般支持90天),预计供应商会有40家,这样会有80w 酒店* 15 房型 * 10销售套餐 * 90天报价 ≈ 100亿个报价数据,这些数据需要落地到我们的库里面,以便于进行展示。因此需要将销售套餐及90天报价进行分库分表设计,平摊数据库实例的数据量和并发压力。

一.设计方案:

1)因为这些数据都是单条读写,不会出现复杂的关联查询,因此我们能够接受每张表最多存储500w条数据,总共需要 100亿/500万=5000表 约等于 2^12 = 64 * 16.

所以设计成16个数据库,每个库16张表。


2) RP路由规则:

DBID = supplierCode+cityCode%M

TABLE_ID = hotelCode % N

其中RP_ID为RP主键,M为数据库实例数量, N为每个库分表数量

3) Price路由规则:

DBID = supplierCode+cityCode%M

TABLE_ID = hotelCode % N 

其中RPID为RP主键,M为数据库实例数量, N为每个库分表数量

注:supplierCode、cityCode、hotelCode格式为字符串,考虑转成均匀分布的数字型id,采用FNVHash1算法处理。





sharding-jdbc相关配置(保密原因只能给出示例)


<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
       xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
       xmlns:context="http://www.springframework.org/schema/context"
       xmlns:tx="http://www.springframework.org/schema/tx"
       xmlns:rdb="http://www.dangdang.com/schema/ddframe/rdb"
       xsi:schemaLocation="http://www.springframework.org/schema/beans
                        http://www.springframework.org/schema/beans/spring-beans.xsd
                        http://www.springframework.org/schema/tx
                        http://www.springframework.org/schema/tx/spring-tx.xsd
                        http://www.springframework.org/schema/context
                        http://www.springframework.org/schema/context/spring-context.xsd
                        http://www.dangdang.com/schema/ddframe/rdb
                        http://www.dangdang.com/schema/ddframe/rdb/rdb.xsd">

    <bean id="hotelPriceDataSource" class="com.alibaba.druid.pool.DruidDataSource" init-method="init" destroy-method="close">
        <property 
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值