数据库的数据分布方式

原创 已于 2022-03-11 11:22:27 修改 · 3.2k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#哈希算法 #数据库 #mysql

于 2022-03-08 12:09:16 首次发布
本文详细介绍了数据库的数据分布方式，包括Hash分区、主键Hash结果取模分区、主键一致性Hash分区、Range分区、主键Range分区、List分区和组合分区。讨论了各种分区策略的优缺点，如Hash分区的等值查询效率高但范围查询低效，Range分区在范围查询上的优势以及数据倾斜问题，还有List分区在特定场景下的应用。文章还提到了分区策略在数据分布、查询效率和数据迁移等方面的影响。

数据分布方式比较

分区方式 - 大类 Hash分区 Range分区
分区方式 - 细类 主键Hash取模分区 主键一致性Hash分区 主键Range分区
热点数据分布

均匀

根据hashkey取模

均匀

根据hashkey按range分布

均匀

两层映射

不均匀

最后一个分区为热点分区
扩缩容

代价大

全部数据重新分布
最低0.47元/天 解锁文章
解读 | GreatDB如何进行数据分布？
GreatDB的博客
07-29 680
另外，GreatDB的分片在计算节点上，相对业内采用“元数据管理节点”或者“K-VALUES”更新表的元数据分片信息，其优势在于能将数据相对均匀地分散在后端存储节点上，更易发挥分布式数据库多点多实例计算的性能。如网站商品的标签表、类别表。目的是优化分布式的下推和后端存储数据的内部计算，减少跨节点的数据交互和分布式事务开销，提升SQL的查询效率和性能。为了提升分布式表跨节点关联查询的性能，而创建的业务配置表，静态表，或极少更新的表，不建议大表使用全局表，其副本冗余较多，磁盘空间占用较大大，更新性能代价大。..
分布式数据库 分布式数据库_数据分布及其参数
weixin_26642481的博客
09-16 984
分布式数据库 分布式数据库Rahul Kaushik拉胡尔·考希克(Rahul Kaushik) Follow跟随 Aug 25 8月25 Data Distribution and its Parameters 数据分配及其参数 As an ML engineer it is important to know the science of statistics to treat any da...
数据库大小分布情况
java开发指南博客 【转载】
03-21 167
---数据库大小分布情况 SET NoCount ON CREATE TABLE #DBsize ( [DatabaseName] [nvarchar](75) NOT NULL , [Size] [decimal] NOT NULL , [Name] [nvarchar](75) NOT NULL , [Filename] [nvarchar](300) NOT NULL...
分布式数据库（“分布计算”概念发展）
07-19
随着传统的数据库技术日趋成熟、计算机网络技术的飞速发展和应用范围的扩充，数据库应用已经普遍建立于计算机网络之上。这时集中式数据库系统表现出它的不足：数据按实际需要已在网络上分布存储，再采用集中式处理，势必造成通信开销大；应用程序集中在一台计算机上运行，一旦该计算机发生故障，则整个系统受到影响，可靠性不高；集中式处理引起系统的规模和配置都不够灵活，系统的可扩充性差。在这种形势下，集中式DB的“集中计算”概念向“分布计算”概念发展。分布计算主要体现在客户机／服务器模式和分布式数据库体系结构两个方面。
Web站点数据库分布存储浅谈
jiangxinyu的专栏
11-21 947
[原创]  Web站点数据库分布存储浅谈作者：heiyeluren博客：http://blog.csdn.net/heiyeshuwu时间：2007-11-18【 前言 】网 站在Web 2.0时代，时常面临迅速增加的访问量（这是好事情），但是我们的应用如何满足用户的访问需求，而且基本上我们看到的情况都是性能瓶颈都是在数据库上，这 个不怪数据库，毕竟要满足很大访问量确实对于任何一款数据库都是很大的
分布式内存数据库数据分布分析及设计.pdf
08-10
该策略以数据节点的物理内存限制为基础，提出了适合于分布式内存数据库的数据分布方案，从而提高数据分布的效率。 在分布式内存数据库的数据分布设计中，主要涉及两种启发式算法：启发式添加副本算法和启发式删除...
多数据库系统数据分布操作的设计与实现的开题报告.docx
最新发布
07-14
研究方法将采用理论研究与实践相结合的方式，通过分析现有文献，结合实际业务需求，设计出符合要求的数据分布操作模块，并通过实际部署和测试，评估模块的实际效能和可靠性。 预期成果包括：一是实现一个高效可靠的...
适用于云计算的面向查询数据库数据分布策略.pdf
10-01
适用于云计算的面向查询数据库数据分布策略.pdf
数据库集群中的数据分布策略研究
07-06
在数据库集群中，数据分布策略主要包括数据的划分、复制、以及这些数据块在集群中各节点上的分配。均匀的数据划分是早期常用的方法，它将数据平均分布在集群的所有节点上，以期达到负载均衡。但这种方法在实际应用中...
解读数据库对象分布
杨建荣的学习笔记
11-30 318
这是学习笔记的第1817篇文章在我们的工作中，其实我们对于自己所负责的数据库是不够清晰的，比如我们了解自己所负责的数据库中表，索引分布情况吗？这里我们不需要给出具体数字...
如何编写一个分布式数据库
热门推荐
stark_summer的专栏
10-02 2万+
讲师: 刘奇(goroutine) 个人简介： PingCAP创始人兼CEO。分布式系统专家，擅长分布式数据库，分布式缓存。目前从事NewSQL方向的创业，通过开源方式重建google内部的F1和spanner。目前项目已经开源，https://github.com/pingcap/tidb大家好, 我是开源项目 分布式 NewSQL 数据库 TiDB 和 分布式缓存 Codis 的 创始人 刘
Mysql的几种分布方式及应用场景
dsiori的博客
01-10 3502
方法1: 直接使用数据库提供的SQL语句 ---语句样式: MySQL中,可用如下方法: SELECT * FROM 表名称 LIMIT M,N。 ---适应场景: 适用于数据量较少的情况(元组百/千级)。 ---原因/缺点: 全表扫描,速度会很慢 且 有的数据库结果集返回不稳定(如某次返回1,2,3,另外的一次返回2,1,3)。Limit限制的是从结果集的M位置处取出N条输出,
分布式理论 - 数据分布的方式
b9x__的博客
02-25 1606
数据分布方式          所谓分布式系统顾名思义就是利用多台计算机协同解决单台计算机所不能解决的计算、存储等问题。单机系统与分布式系统的最大的区别在于问题的规模，即计算、存储的数据量的区别。将一个单机问题使用分布式解决，首先要解决的就是如何将问题拆解为可以使用多机分布式解决，使得分布式系统中的每台机器负责原问题的一个子集。由于无论是计算还是存储，其问题输入对象都是数据，所以如何拆解分布式系...
数据库物理分布设计
talentluke的专栏
04-22 492
概述 我们无论使用哪种数据库，无论怎样设计数据库，我想都会遵从一个原则：数据安全性和性能高效这两个主要方面，但是关于这两个方面的话题太多，在这里就不一 一陈述，我只是从数据库物理分布设计方面和大家一起简单的探讨一下。因为数据库良好的物理分布设计也是对数据安全性和性能高效影响比较大, 就象我们在建大楼之前一定要先打好地基一样。 現实中我们在应用各种不同数据库的时候，往往会忽略数据库的物理布局，只有在...
Web站点数据库分布存储
逍遥游的博客
01-16 444
【 前言 】 网 站在Web 2.0时代，时常面临迅速增加的访问量（这是好事情），但是我们的应用如何满足用户的访问需求，而且基本上我们看到的情况都是性能瓶颈都是在数据库上，这 个不怪数据库，毕竟要满足很大访问量确实对于任何一款数据库都是很大的压力，不论是商业数据库Oracle、MS SQL Server、DB2之类，还是开源的MySQL、PostgreSQL，都是很大的挑战，解决的方法很简单，就是...
[原创] Web站点数据库分布存储浅谈
heiyeluren的blog（黑夜路人的开源世界）
11-18 1万+
[原创]  Web站点数据库分布存储浅谈 作者：heiyeluren 博客：http://blog.csdn.net/heiyeshuwu 时间：2007-11-18 【 前言 】 网 站在Web 2.0时代，时常面临迅速增加的访问量（这是好事情），但是我们的应用如何满足用户的访问需求，而且基本上我们看到的情况都是性能瓶颈都是在数据库上，这 个不怪数据库，毕竟要满足很大访问量确实对
2.3 数据源
lws0888的专栏
04-06 365
    由于数据来源多样，要使我们开发的程序适用于多种数据库，甚至是文件，就需要对数据来源进行封装——数据源DataSource。    虽然数据源的引入是为了屏蔽数据库间的差异，但是也给我们带来其它好处，由于所有的数据库操作都是通过这个类实现的，所以我们可以通过简单改造，就能监控所有数据库操作的性能；另外还能通过这个类传递参数、数据验证、数据过滤等。    数据源应具备的基本方法： 
oracle分区技术在计费中的应用论证 (转载自ITPUB)
albert的专栏
10-17 1550
數据庫物理設計經驗談 数据库物理分布设计作者: CCBZZP概述我们无论使用哪种数据库，无论怎样设计数据库，我想都会遵从一个原则：数据安全性和性能高效这两个主要方面，但是关于这两个方面的话题太多，在这里就不一一陈述，我只是从数据库物理分布设计方面和大家一起简单的探讨一下。因为数据库良好的物理分布设计也是对数据安全性和性能高效影响比较大, 就象我们在建大楼之前一定要先打好地基一样。現实中我们
最佳适应算法：优化分布式数据库数据分布
最佳适应算法在分布式数据库的场景下，也可以被用来优化数据分布。 ### 分布式数据库 分布式数据库是将数据分布在不同的节点上，通过网络进行通信来管理数据的数据库系统。其主要目的是提高数据处理的可扩展性、...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值