订单表每天新增500w数据，分库分表如何设计？

最新推荐文章于 2024-03-08 08:25:20 发布
最新推荐文章于 2024-03-08 08:25:20 发布
阅读量174 收藏
点赞数
分类专栏： mysql 文章标签： 数据库
原文链接：https://mp.csdn.net/mp_blog/creation/editor?spm=1001.2101.3001.5352
版权

1.1天500万，那么1年就是18亿，我们按照2年的增量来算就是大概40亿

2.在预留一些空间，按照50亿来算

3.那么需要使用32个库，每个库32张表，那么一共就是1024张表，每个表存500万数据

4.使用orderId(订单id)当做分片键，使用一致性hash算法来分配，要插入到那个数据库的那个表中

5.当订单的数据超过了2年，那么使用冷热分离的方案或者使用tidb在线扩容数据库来解决

6.热库数据保留一年，1年以后迁移到冷库，冷库保存2年，2年后,进行数据归档

我是一只代码狗
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
场景应用：订单表每天新增500W数据，分库分表的方案应该如何设计？
流楚丶格念的博客
10-10 716
请注意，这个示例还包括数据库初始化、连接池配置、分片策略等方面的详细代码，混在一起了，别直接贴，看看逻辑就好。我们需要实现数据库路由和分片管理逻辑，确保每笔订单数据都正确地分布到相应的数据库和表中。这个示例演示了如何在分库分表的情况下使用Spring Boot和Seata来处理分布式事务，确保订单数据的一致性。考虑分库分表后的分布式事务处理，可能需要采用分布式事务管理工具，如Seata或TCC事务等，以确保数据的一致性。实施分库分表后，需要有可靠的数据迁移工具，确保现有数据顺利迁移到新的架构。
订单系统的设计与海量数据处理实战
持续学习，坚持原创，分享技术笔记及经验。
12-10 493
订单系统的设计与海量数据处理实战
大数据数仓建设流程方案,数仓设计流程,适用于实际工作场景
老姜的数据江湖
10-25 1331
大数据数仓概念 学术上：数据仓库，英文名称为Data Warehouse，可简写为DW或DWH，是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。为需要业务智能的企业，提供指导业务流程改进、监视时间、成本、质量以及控制。 数据仓库（Data Warehouse）是一个面向主题的（Subject Oriented）、集成的( Integrate）、相对稳定的（Non-Volatile）、反映历史变化（Time Variant）的数据集合，用于支持管理、运营决策。 技术上：不可更新的，反映历史变化
mongodb支付系统数据库订单表设计
weixin_42583683的博客
01-08 750
在设计 MongoDB 的订单表时，您需要考虑以下几点： 订单信息：这应该包括订单号、下单时间、订单状态(如已完成、已取消等)、订单总金额等。 用户信息：这应该包括用户的姓名、地址、电话号码等。 商品信息：这应该包括商品的名称、数量、单价等。 支付信息：这应该包括支付方式(如信用卡、支付宝等)、支付状态(如已支付、未支付等)等。 建议将这些信息分成若干个字段，并将它们存储在订单表中。例...
MySQL创建商品订单数据库
cool-wangtongzhou
06-22 5655
CREATE TABLE `ProductClass` ( `classNo` char(3) NOT NULL, `className` varchar(40) NOT NULL, PRIMARY KEY (`classNo`) ) ENGINE=InnoDB DEFAULT CHARSET=utf8mb3;
MyBatis实现Mysql数据库分库分表操作和总结（推荐）
08-29
MyBatis实现Mysql数据库分库分表操作和总结 MyBatis是一款流行的持久层框架，能够与Mysql数据库进行交互。在大规模的应用系统中，数据库的性能和可扩展性变得非常重要。为了解决这个问题，需要实现数据库的分库分表...
MySQL30W测试数据
09-17
3. **分表分库策略**：当数据量达到一定程度，单表存储可能会面临性能瓶颈。30W条数据虽然不是特别庞大，但可以作为分库分表策略的试验田。可以尝试水平分割（如按用户ID范围分表）或垂直分割（如业务相关字段拆分）...
一种可以避免数据迁移的分库分表scale-out扩容方式1
08-08
当单库数据量接近千万，单表数据量接近500万时扩容。这种方法确保了单表数据上限不会持续增长，但当表数量达到上限后，仍需对表进行操作以继续扩容。 这两种方案都强调了在设计之初就考虑扩展性的必要性，通过合理...
创建DB 分库分表脚本
12-07
一个 mysql 分库 分表的脚本程序，用于自动划分mysql 库表。
python向已存在的excel中新增表,不覆盖原数据的实例
09-20
在Python编程中，有时我们需要对Excel文件进行操作，例如向已存在的Excel文件中添加新的工作表（sheet）或更新已有内容，但不覆盖原始数据。本文将详细介绍如何使用Python实现这个功能，特别是针对标签提到的"python...
采购订单数据表的设计
06-07
自己设计的采购订单的数据表设计，包括每个表的设计，还有一份自己字典。
mysql订单表设计
最新发布
Dxy1239310216的博客
03-08 1499
请注意，在设计数据库时，确保字段的命名具有描述性且遵循命名规范，以便其他开发人员能够轻松理解字段的用途。此外，合理设置索引（如主键和外键）可以提高查询性能并维护数据完整性。设计MySQL中的订单表时，表名和字段的选择应基于您的业务需求和数据库设计原则。这些字段是基于常见的订单管理需求设计的。根据您的具体业务需求，您可能还需要添加其他字段或调整现有字段。
电子商务(电销)平台中订单模块(Order)数据库设计明细
沉在水底的鱼的博客
10-30 3406
电子商务(电销)平台中订单模块(Order)数据库设计明细 以下是自己在电子商务系统设计中的订单模块的数据库设计经验总结，而今发表出来一起分享，如有不当，欢迎跟帖讨论~ 订单表 (order) |-- 自动编号（order_id, 自增长主键） |-- 订单单号（order_no, 唯一值，供客户查询） |-- 商店编号（shop_id, 商店表自动编号） |-- 订单状态 (order_status,未付款,已付款,已发货,已签收,退货申请,退货中,已退货,取消交易) |-- 商品数量 (product_
【mysql】数据库表设计
qiaziliping的博客
03-15 583
【代码】数据库表设计。
用mysql建销售订单主表_mysql订单表如何设计？
weixin_30841011的博客
01-28 3673
mysql订单表如何设计？商品表和订单表。通过一个表来关联。那删除了商品，相关联的订单表如何显示出这个已经删除的商品？订单表需要冗余商品名、商品编号、价格等基本信息。不能只保存一个商品主键，这个是订单表的基本原则，同时生成了订单的商品是不能删除的。订单表中引用商品表主键，删除使用状态假删。同时引入商品的状态，总之就是反范式设计，保证一次可以获得全部要的状态，不要进行多表jion。订单：分为以下...
支付+商城双系统：2、数据库设计
小鑫的博客
07-19 1442
数据库设计前言一、需要哪些表？二、使用步骤1.引入库2.读入数据总结 前言 我们使用的数据库是mysql，使用的框架是mybatis。为了保存我们支付+商城项目的数据，首先对用到的表进行一下设计。 一、需要哪些表？ 首先，需要用户表，来区分不同用户的操作。 一个用户可能设置了多个地址，所以需要一个地址表。 然后，需要商品表，不然用户买啥？ 有商品表，就要有类目表，不然那么多商品放一起，太杂乱。 那么用户看到喜欢的商品，肯定就放购物车先啦，所以需要购物车表。 支付之前先下单，所以会有订单表，记录谁下的单
alter table add column多个字段_数据库设计之字段冗余
weixin_39943220的博客
11-04 916
学过数据库设计的同学都知道，数据库设计有三大范式，但是在实际工作中，三大范式很难被严格的执行。本文将给大家介绍一种常见的、违反范式的数据库设计方案——字段冗余1 经典示例先来看一个经典的例子，在一些商城系统里，要显示已购买的订单，一般会显示订单号、下单时间、订单金额、商品名称等，如下图。正常我们如果按三大范式来设计表，应该是下面这样，包含【订单表】和【商品表】，在【订单表】中用【商品ID】来关联【...
商城订单模块实战 - 数据库设计、ABA问题处理、读写分离分库分表
weixin_38277138的博客
04-28 2485
商城订单模块实战 - 数据库设计、ABA问题处理、读写分离分库分表
JavaWeb学习阶段一MySQL数据库三(数据库设计：一对一、一对多、多对多的关系设计和案例)
我要记录学习博客
03-18 1626
JavaWeb学习阶段一MySQL数据库三(数据库设计：一对一、一对多、多对多的关系设计和案例) 2.1 数据库设计简介 软件的研发步骤 数据库设计概念 数据库设计就是根据业务系统的具体需求，结合我们所选用的DBMS，为这个业务系统构造出最优的数据存储模型。 建立数据库中的表结构以及表与表之间的关联关系的过程。 有哪些表？表里有哪些字段？表和表之间有什么关系？ 数据库设计的步骤 需求分析（数据是什么? 数据具有哪些属性? 数据与属性的特点是什么） 逻辑分析（通过ER图对数据库进行
mysql如何进行分库分表
09-02
MySQL分库分表是一种常用的水平扩展数据库的方法，它将一个大的数据库按照一定的规则分成多个小的数据库，每个小的数据库再按照一定的规则分成多个小的表，从而达到分布式存储和负载均衡的目的。 下面是一个基本的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值