分布式DB规划要点

最新推荐文章于 2024-01-30 11:22:50 发布

西海棱镜

最新推荐文章于 2024-01-30 11:22:50 发布

阅读量1.4k

点赞数

分类专栏：分布式架构和事务文章标签： DB 分布式分库分表

本文链接：https://blog.csdn.net/zhanjianshinian/article/details/52744244

版权

本文探讨了分布式数据库规划的关键点，包括核心与非核心功能的物理隔离、大表拆分、分库分表策略、动态索引、SQL路由、模块化迁移、订单系统拆分以及基于用户ID的分库策略。同时提到了使用ES支持高效查询和数据同步，确保系统的高性能和可扩展性。

摘要由CSDN通过智能技术生成

1，划分核心非核心功能，例如游戏的接入业务中，登录注册校验为核心功能，msg和日志为非核心功能，DB,server和cache都需要物理隔离，只要核心非核心存在共享资源，如DB公用1个，要是非核心出现大量整表查询，核心功能会受到影响，核心和非核心之间采用接口访问。

2，一张大表拆分到不同DB，来提升数据库性能。DB分为4个分库，模值为1024，每个分库占据256个位置，hash （test1234） = 3109729401 % 1024 = 537 在分库3.扩容方式：原分库分割为2个，每个分库占据128个位置。

3，针对hbase存储log收集系统。log表存储日志记录，meta表存储索引元数据（包含动态索引index表的名称），动态index表：存索引的具体信息，一个索引对应1张表。log列族：tag存储日志taf（如tag_LEVEL,tag_TIME,tag_HOST）,message存储日志信息。meta表列族：index作用含2个，qualifile，name和span，那么存索引名称，span是索引使用的时间间隔。动态索引表：rowkey是json格式的indexRowkey字符串，如["tags":["INFO"]，time: 2342343]。获取日志产生的时间，然后内部存储1个tag是的循环，匹配则为其建索