勇闯BAT 讲一下你们项目上的分库分表以及如何设计可以动态扩容缩容的分库分表方案

最后

光给面试题不给答案不是我的风格。这里面的面试题也只是凤毛麟角,还有答案的话会极大的增加文章的篇幅,减少文章的可读性

Java面试宝典2021版

最常见Java面试题解析(2021最新版)

2021企业Java面试题精选

本文已被CODING开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友,可以点击这里获取

  • 表级别:常用的卫星定位表,剔除一些不常用的字段到子表中去,减少卫星定位表体量

  • 实例级别:把非卫星定位的业务,踢出去,让卫星定位业务,单独使用一个数据库实例

水平拆分

思想:把大表拆分为多个表,例如卫星定位表,拆分为卫星定位_202104、拆分为卫星定位_202105

常用方案


分库分表方案最主要就是路由算法,把路由的key按照指定的算法进行路由存放。

常用路由算法为:hash取模range范围

Hash取模

分库分表列Hash取模,例如根据用户Id%8,获取用户的区域id%8

图片

优点:数据均匀分配,不会存在热点问题

缺点:动态扩容缩容的时候,由于取模的分母变化了,所以需要数据迁移,迁移工作量巨大

  • 这里有个小窍门,可以参考hash扩容,采用2倍扩容方式,这样可以减少数据迁移的数据量

热点的含义:热点的意思就是对订单进行操作集中到1个表中,其他表的操作很少。

Range范围

range方案也就是以范围进行拆分数据。

图片

优点:可以实现动态扩容,无需迁移数据,需要的时候再增加扩容实例即可

缺点:数据分配不均匀,会存在数据热点问题。

Hash和Range范围结合


hash是可以解决数据均匀的问题,range可以解决数据迁移问题,我们来结合两者的优点。

先使用Range范围算法来路由数据,实现无需迁移的问题,再在Range范围内进行Hash取模达到范围内数据均匀

同时为了更接近我们实际项目需求,还需满足以下要求:

  • 扩容实例,可以预先分配一部分,等需要扩容的时候再启动一部分。

  • 表级别最好是数据连续的,不要进行Hash算法,毕竟范围查询还是很多的,那么到表级别只能选Range范围算法,例如按时间t_gps_202009、t_gps_202010

  • 根据上条,那么表之上要加Hash算法平均,再之上还要加个Range来实现动态扩容

设计是比较简单的,就3张表,把group,DB,table之间建立好关联关系就行了。

图片

group和DB的关系

图片

总结


分库分表中会遇到什么问题?

最后

权威指南-第一本Docker书

引领完成Docker的安装、部署、管理和扩展,让其经历从测试到生产的整个开发生命周期,深入了解Docker适用于什么场景。并且这本Docker的学习权威指南介绍了其组件的基础知识,然后用Docker构建容器和服务来完成各种任务:利用Docker为新项目建立测试环境,演示如何使用持续集成的工作流集成Docker,如何构建应用程序服务和平台,如何使用Docker的API,如何扩展Docker。

总共包含了:简介、安装Docker、Docker入门、使用Docker镜像和仓库、在测试中使用Docker、使用Docker构建服务、使用Fig编配Docke、使用Docker API、获得帮助和对Docker进行改进等9个章节的知识。

image

image

image

image

关于阿里内部都在强烈推荐使用的“K8S+Docker学习指南”—《深入浅出Kubernetes:理论+实战》、《权威指南-第一本Docker书》,看完之后两个字形容,爱了爱了!

本文已被CODING开源项目:【一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码】收录

需要这份系统化的资料的朋友,可以点击这里获取

总结学习笔记+最新讲解视频+实战项目源码】](https://bbs.csdn.net/forums/4f45ff00ff254613a03fab5e56a57acb)收录**

需要这份系统化的资料的朋友,可以点击这里获取

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值