数据库设计、分库分表

最新推荐文章于 2024-07-31 20:28:02 发布
最新推荐文章于 2024-07-31 20:28:02 发布
阅读量1k 收藏 3
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42723925/article/details/89813981
版权
本文探讨了数据库设计的重要性，详细介绍了逻辑设计的三大范式，并讨论了反范式化对性能的影响。接着，针对数据量增长导致的性能瓶颈，提出了分表策略，包括垂直拆分和水平拆分的适用场景及分库的必要性。同时，指出了分库分表带来的事务和跨库JOIN问题，并提到了sharding-jdbc分表算法的应用。
摘要由CSDN通过智能技术生成

1、为什么进行数据库设计？

良好的设计

糟糕的设计

减少数据冗余

存在大量数据冗余

避免数据维护异常

存在数据插入，删除，更新异常

节约存储空间

浪费存储空间

高效的访问

访问效率低

2、数据库设计步骤

3、逻辑设计——三大范式

第一范式：强调的是列的原子性，即列不能够再分成其他几列。    

     --->字段不可分    

 第二范式：表必须有一个主键；没有包含在主键中的列必须完全依赖于主键，而不能只依赖于主键的一部分。    

      -->非主键字段依赖主键          

第三范式：非主键列必须直接依赖于主键，不能存在传递依赖。即不能存在：非主键列 A 依赖于非主键列 B，非主键列 B 依赖于主键的情况。      

      -->非主键字段不能互相依赖

最低0.47元/天 解锁文章
小囡楠
关注
Mycat数据库分库分表
10-28
2. 表结构设计：在分库分表后，表的主键需要调整，通常采用全局唯一ID生成器生成分布式主键，保证数据的唯一性。 3. SQL改写：由于分片的存在，SQL不能再直接操作全量数据，需要对SQL进行改写，Mycat会自动完成这个...
【论文写作】网上选课系统中数据库设计模块如何写
bwwork的博客
01-14 1444
4.1 数据库设计 为充分保护数据的一致性，数据库中各表都规范化设计，下图是系统数据库中使用的表以及各表之间的关系：
sql 导出数据库结构xls()
choumeiyu1706的博客
11-26 542
SELECT COLUMN_NAME 列名, COLUMN_TYPE 数据类型, DATA_TYPE 字段类型, CHARACTER_MAXIMUM_LENGTH 长度, IS_NULLABLE 是否为空, COLUMN_DEFAULT 默认值, COLUMN_...
数据库分库分表设计
最新发布
qq_52445173的博客
07-31 459
当数据量很大的时候，分库分表策略可以减少单个服务器的压力，提高查询性能，并提高扩展性，随时可以添加新的数据库来处理更多的请求，甚至做到业务分离，将不同的业务逻辑和数据存储分离，使得每个数据存储集群或者数据表专注于特定的功能，遵循单一责任原则。此时，就需要考虑分表了，将数据拆分到多张表中来减少单表存储的数据量，从而提升读写的效率。结合前面的两种情况，如果同时满足前面的两个条件，也就是数据连接也不够用，并且单表的数据量也很大，从而导致数据库读写速度变慢的情况，这个时候就要考虑既分库又分表。
数据库（表结构）设计技巧及注意事项
热门推荐
DannyIsCoder的博客
12-01 4万+
当您在决定开发一个数据库管理项目时，最先着手的工作就应是数据库表结构的设计了。可以这么说，表结构的设计是开发数据库管理项目的基石，一个糟糕的表结构设计，可能会严重延误您的项目开发周期，使您大量的劳动时间为此付之东流。表结构设计是数据库逻辑设计的重要组成部分，直接影响到数据库的性能，所以小编在本文对数据库（表结构）设计技巧及注意事项做一个讲解！ 　　1．表名一般以【模块名称_具体表名】来实现，
mysql schema设计优化
tonyXf121的专栏
08-09 4762
mysql前期的设计问题会给后期的开发维护造成很大的问题，所以在mysql数据库的设计阶段就应该保证尽可能的高效，尽可能的减小后期开发和维护代价。 如何设计 1.适度冗余， 让query尽量减少join 虽然optimizer会对query进行一定的优化，但有时候遇见复杂的join，优化效果并不令人满意，再加上本来join的性能开销，所以需要尽量的减少join，而需要通过冗余来实现。比如：有
mysql论文的摘要格式怎么写_如何撰写论文的摘要
weixin_36315943的博客
02-05 521
论文摘要怎么写摘要：简洁、具体的摘要要反映论文的实质性内容，展示论文内容足够的信息，体现论文的创新性，展现论文的重要梗概，一般由具体研究的对象、方法、结果、结论四要素组成。对象——是论文研究、研制、调查等所涉及的具体的主题范围，体现论文的研究内容、要解决的主要问题，是问题的提出，研究方向的确立与目标的定位。方法——是论文对研究对象进行研究的过程中所运用的原理、理论、条件、材料、工艺、结构、手段、程...
数据库分库分表思路.docx
05-15
总之，数据库分库分表是应对大数据挑战的重要手段，它通过将数据分散存储，降低了单一数据库的压力，提高了查询效率，但也引入了新的挑战，需要在设计和实现时充分考虑各种因素，以平衡系统性能、开发复杂度和数据...
MySQL数据库优化之分表分库操作实例详解
09-08
Spring Boot等框架提供了对分库分表的支持，如ShardingSphere等中间件可以帮助开发者实现这些策略，简化数据库的扩展和维护工作。 总之，MySQL数据库的分表分库优化是应对高并发、大数据量场景的有效手段。通过对...
mysql教程表怎么写数据库_MySQL(一) 数据表数据库的基本操作
weixin_35696321的博客
02-02 3284
这类文章，记录我看《MySQL5.6从零开始学》这本书的过程，将自己觉得重要的东西记录一下，并有可能帮助到你们，在写的博文前几篇度会非常基础，只要动手敲，跟着我写的例子全部实现一遍，基本上就搞定了，前期很难理解的东西基本没有，所以写博文的内容，就是以练题的形式来呈现的。需要用的资料以链接的形式给需要的同学。图形化工具 Navicat(前期不推荐用，直接手动敲)：Navicat 密码：c7fs开...
导出数据库表设计（写论文时插入数据库设计表结构）
qq_39195079的博客
05-02 1万+
自己复制下列sql到navicat一运行就懂了： SELECT COLUMN_NAME 字段名称, COLUMN_TYPE 类型, CHARACTER_MAXIMUM_LENGTH 大小, ( CASE WHEN IS_NULLABLE = 'NO' THEN '否' ELSE '是' END ) 是否为空， COLUMN_COMMENT 描述 FROM information_s...
数据库设计（笔记整理LIA）
Felix_Dreammaker的博客
12-22 878
数据库设计： 基础思路或步骤： 1.根据业务的具体。 2.结合所选用的DBMS（mysql，oralce等）。 3.构造出最优的数据存储模型。 4.并建立好数据库中的表结构 和 表与表之间的关联关系。 良好的数据库设计： 1.减少数据冗余。 2.避免数据维护异常。（目前还不是很清楚应用环境是什么，以后回顾看看） 3.节约存储空间。 4.高效率地访问。
mysql：认识mysql
jupiter_888的博客
10-16 176
Mysql数据库 数据库: 数据库是一些关联表的集合。 数据表: 表是数据的矩阵。在一个数据库中的表看起来像一个简单的电子表格。 列: 一列(数据元素) 包含了相同的数据， 例如邮政编码的数据。 行：一行（=元组，或记录）是一组相关的数据，例如一条用户订阅的数据。 冗余：存储两倍数据，冗余降低了性能，但提高了数据的安全性。 主键：主键是唯一的。一个数据表中只能包含一个主键。你可以使...
Java程序设计 实验七 数据库应用
qq_45964335的博客
01-06 1408
实验目的 了解数据库系统、关系模型、客户-服务器模式等基本概念，掌握SQL的数据定义、数据操纵和数据查询等语句的语法；了解JDBC各种数据库驱动程序类型，熟悉JDBC提供的接口和类，掌握指定驱动类型、连接数据库、执行SQL语句、处理结果集等操作方法。 实验内容 数据库应用程序 1）首先在数据库应用程序中创建数据库Studentinfo，按照下表的结构在数据库中建立"student"表。 字段名 |Java数据类型 |宽度 |SQL数据类型 字段名 Java数据类型 宽度 SQL数据类型
mysql分库分表策略期刊论文_常用 MySQL 分库分表方案
weixin_34514378的博客
02-02 166
一、数据库瓶颈不管是IO瓶颈，还是CPU瓶颈，最终都会导致数据库的活跃连接数增加，进而逼近甚至达到数据库可承载活跃连接数的阈值。在业务Service来看就是，可用数据库连接少甚至无连接可用。接下来就可以想象了吧(并发量、吞吐量、崩溃)。1、IO瓶颈第一种：磁盘读IO瓶颈，热点数据太多，数据库缓存放不下，每次查询时会产生大量的IO，降低查询速度 ->分库和垂直分表。第二种：网络IO瓶颈，请求...
单数据库大表分表设计
wanyuxiang000的专栏
02-09 981
背景 我们业务系统GPS数据量非常庞大，一天1万辆设备大概存在3600万数据，这种规模的数据自身查询用mysql是存在问题的，所以我们采用的是clickhouse存储，但是CK对于批量修改了删除支持都不好，而且CK不支持事务，我们的场景是保存之后还需要做一些数据丰富，所以考虑把CK存储的数据拿回来放在mysql中，因为我们是一主一从模式（还没有多主同步），所以就存在单节点要保留所有的数据，这就是本文主题（单个数据库大表进行分拆表设计），分拆表可以扩展到多节点多主模式哈，大家注意：）可能有人...
数据库表设计
hanjiaqian的博客
10-16 1万+
我们在设计数据库的时候，是否会突破常规，找到最适合自己需求的设计方案，下面来举个例子： 常用的邻接表设计，都会添加 一个 parent_id 字段，比如区域表（国、省、市、区）： CREATE TABLE Area( [id][int]NOTNULL, [name][nvarchar](50)NULL, [parent_id][int]NULL, [type][int]NULL); name:地域的名称， parent_id 是父ID，省的...
数据库分库分表实施策略与示例解析
"数据库分库分表(sharding)系列" 数据库分库分表，简称Sharding，是一种解决大数据量下数据库性能问题的有效手段。它通过将单一的大型数据库拆分为多个小型数据库来分散负载，提高系统的读写性能和可用性。在进行...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值