《超大流量分布式系统架构解决方案》学习笔记----第五章 读写优化分库分表

说实话分库分表在实际生产环境没有用过,有一段时间专门研究过这个技术,其实核心的就是如何拆分的算法,最简单的就是直接按照id取模,然后分到对应的表中,复杂点的有一致性hash算法,或者hash 槽算法。说白了就是在实际的存储层的之前加一个映射层,比如hash取模后的结果0~1000的数据放到A库,1001~2000的数据放到B库,以此类推,这样就可以方便的解决扩容的问题。

紧接着又会产生一个问题,由于id是用的mysql自增id, 分库分表之后的id是不能直接由于mysql自增id生成,不然分到不同的表中会有重复id产生。所以,就要引入id生成器,这里推荐一个比较好的方案,用redis的incr命令。

另外一个问题就是,join查询,分库分表之后,join查询就很特别麻烦。

一般的解决方案是:

1、字段冗余,把需要查询的字段尽可能放到一个表中。

如果是类似统计需求,实时性要求不是太高可以单独生成一个统计表把需要的字段放一张表。

2、拆分join查询,相当于把原本一次查出来的sql拆分成多个sql。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值