mysql双写是什么意思_MYSQL双写和块裂

最新推荐文章于 2024-06-04 22:25:46 发布
最新推荐文章于 2024-06-04 22:25:46 发布
阅读量1.3k 收藏
点赞数
文章标签： mysql双写是什么意思
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39710991/article/details/113911301
版权
MySQL的双写缓冲机制用于防止断电导致的数据页只写入一半，确保数据完整性。当事务提交后，脏页复制到双写缓冲，然后写入数据文件。在断电或异常情况时，MySQL会检查并修复数据页。此外，文章还对比了Oracle、PostgreSQL和华为高斯在处理数据块完整性的不同策略。
摘要由CSDN通过智能技术生成

什么时块裂呢？

这就涉及到OS(操作系统)的原子写的大小，一般情况下OS原子写是4K，硬盘一个扇区是512字节，4K需要写8个扇区。

假如写了4个扇区发生了断电,或者其他的意外，那么不就是丢失了另外4个扇区的数据吗？是另外2K字节没有写入！

这是OS和磁盘之间的故事，属于硬件工程师或者叫存储工程师操心的事，不过一般采用UPS或者是RAID卡上的电池来保证。

RAID卡10模式采用写两份来保证，RAID5 采用奇偶校验方式。

那么DATABASE(数据库) 与OS 这两者咋办呢？DATABASE MYSQL是16K一个数据页，ORACLE是8K一个块。远比OS4K原子写要大得多。

如何保证断电的时候数据页只写入了一半？

要么靠硬件来保证，要么靠软件机制来保证！

MYSQL 双写机制

当修改页的事务提交后，通过MEMCPY把该脏页复制到DOUBLE WRITE BUFFER中，DWB不是内存而是硬盘一个区域

它在共享表空间IBDATA分配的连续空间。大小2MB，分两个部分每个部分1MB，根据16K可以分128个页。

DWB 写满后或者刷脏行为，则把DWB写入数据文件中。

当断电时候，MYSQL会检查数据文件的页的CHECKSUM有问题，则从DWB拷贝完整的页来覆盖，然后再根据REDO恢复。

最低0.47元/天 解锁文章
weixin_39710991
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
mysql数据库双写是什么意思_如何保证缓存与数据库双写时的数据一致性？
weixin_34687748的博客
01-28 3901
如何保证缓存与数据库双写时的数据一致性？在做系统优化时，想到了将数据进行分级存储的思路。因为在系统中会存在一些数据，有些数据的实时性要求不高，比如一些配置信息。基本上配置了很久才会变一次。而有一些数据实时性要求非常高，比如订单和流水的数据。所以这里根据数据要求实时性不同将数据分为三级。第1级：订单数据和支付流水数据；这两块数据对实时性和精确性要求很高，所以不添加任何缓存，读写操作将直接操作数据库。...
MySQL双写 - Double Write
weixin_39997438的博客
07-31 5003
如果说change buffer给InnoDB存储引擎带来了性能上的提升，那么Double Write带给InnoDB存储引擎的是数据页的可靠性。本文通过图文的方式，着重讲解Double Write可靠性原理。同时，可以通过点击change buffer链接，查看为什么change buffer会给InnoDB存储引擎带来性能上的提升。
Mysql双写_DoubleWrite
翔之天空的专栏
01-21 3598
目的：防止页损坏， 原理：在内存中开辟了 doublewrite buffer 内存空间(2M)，将脏页复制到doublewrite buffer 内存空间后， 先把doublewrite buffer的页数据写入到共享表空间ibdata1磁盘上，复制了页的副本完成之后， 再将 doublewrite buffer的页数据写入到各个表空间文件中。   数据页默认16k，一次写入512字节，防...
MySQL 关键特性一：插入缓冲、双写缓冲
u013911096的博客
06-04 2340
​ 本文主要介绍 mysql 的几大特性之几，如：双写缓冲和插入缓存。
mysql 双写_MYSQL的DOUBLE WRITE双写
weixin_39873741的博客
01-19 363
期待未来超高速大容量的固态硬盘普及时，只需要CHECKPOINT，而不再需要各种各样的BUFFER,CACHE了DOUBLE WRITE在InnoDB将BP中的Dirty Page刷(flush)到磁盘上时，首先会将Page刷到InnoDB tablespace的一个区域中，我们称该区域为Double write Buffer。在向Double write Buffer写入成功后，再择机将数据拷贝...
mysql 特性之一 double write (双写)
一名数据库爱好者的专栏
02-16 2846
os: centos 7.4 db: mysql 5.7.28 版本 # cat /etc/centos-release CentOS Linux release 7.4.1708 (Core) # # mysql -u root -p Enter password: Welcome to the MySQL monitor. Commands end with ; or \g. Your...
MySQL 精选问答 500 题
qq_38991247的博客
10-03 974
1 、我创建了⼀个没有select权限的⽤户， 执⾏select * from T where k=1 ， 报错“select command denied”，并没有报错“unknown column”，是不是可以说明是在打开表之后才判断读取的列不存在？ 答：这个是⼀个安全⽅⾯的考虑。你想想⼀个⽤户如果没有查看这个表的权限，你是会告诉他字段不对还是没权限？如果告诉他字段不对，其实给的信息太多了，因为没权限的意思还包含了： 没权限知道字段是否存在。 2、wait_timeout 是客户端 ⾮交互式的
keepalived实现Tomcat服务和MySQl双机热备
qiaoshan12138的博客
12-25 215
keepalived实现Tomcat服务和MySQl双机热备 1. 规划 1.1服务器环境规划 负载服务器master及WEB服务器1真实IP：192.168.20.151 负载服务器backup及WEB服务器2真实IP：192.168.20.152 负载服务器虚拟ip：192.168.20.110 1.2 软件环境规划 操作系统：Red Hat Enterprise Linux Server release 5.6 (Tikanga) keepalived：keepalived-1.2.1
Vue写项目后台SpringBoot 01
热门推荐
aaaaaaddddsssss的博客
01-31 2万+
打开idea,配置好maven 新建一个SpringBoot项目 如果没在这选择依赖，在pom.xml中加也是一样的。 resources目录下的application.properties配置文件，数据库之类的 server.port=8888 #tomcat 端口号 spring.datasource.driver-class-name=com.mysql.jdbc.Driver #数据库版本包 spring.datasource.username=root #数据库名 spring.data
最新《老男孩JAVA架构师之路成长课程》
weixin_44878968的博客
04-16 735
|____43.高可用架构设计与实践 |____15、高可用架构设计之高性能数据提交与存储篇 |____14、高可用架构设计之基于堆栈分析篇 |____13、高可用架构设计之安全篇 |____11、高可用架构设计之软件质量保证篇 |____09、高可用架构设计之分布式缓存篇 |____08、...
MySQL双写机制
Lxn2zh的博客
02-13 962
双写(doublewrite)由两部分组成，一部分是内存中的doublewrite buffer，大小为2M，另一部分是屋里磁盘上共享表空间中连续的128个页，大小也是2M。在发生数据库宕机时，可能Innodb正在写入某个页到表中，但是这个页只写了一部分，这种情况被称为部分写失效，虽然innodb会先写重做日志,在修改页，但是重做日志中记录的是对页的物理操作，但是如果这个页本身已经发生了损坏，对页进行重做是没有意义的。为了解决这个问题，提出了双写机制。
java双写什么意思_分布式之数据库和缓存双写一致性方案总结
weixin_29057065的博客
02-26 330
分布式一致性算法开发实战89元(需用券)去购买 >https://www.cnblogs.com/rjzhe...https://www.cnblogs.com/rjzhe...https://www.cnblogs.com/rjzhe...总结：强一致性和缓存，这个本身就是伪命题。。用了缓存，只能保证最终一致性一定有可能在一段时间内，缓存是不新鲜的，哪怕只是几百毫秒。像下订单这种要求不能出...
mysql双写原理_为什么别人能用好 MySQL？万字详解其复杂原理
weixin_29150247的博客
01-20 1437
原标题：为什么别人能用好 MySQL？万字详解其复杂原理来源：简书-七把刀https://www.jianshu.com/p/d4cc0ea9d097MySQL InnoDB 引擎现在广为使用，它提供了事务，行锁，日志等一系列特性，本文分析下 InnoDB 的内部实现机制，MySQL 版本为 5.7.24，操作系统为 Debian 9。MySQL InnoDB 的实现非常复杂，本文只是总结了一些皮...
MySQL InnoDB特性：两次写（Double Write）
jc_benben的专栏
01-04 1万+
转自：http://www.ywnds.com/?p=8334 一、经典Partial page write问题？ 介绍double write之前我们有必要了解partial page write（部分页失效）问题。 InnoDB的Page Size一般是16KB，其数据校验也是针对这16KB来计算的，将数据写入到磁盘是以Page为单位进行操作的。我们知道，由于文件系统对一次大数据页（
MySQL Doublewrite Buffer（双写缓冲区）深入解析：原理及作用
码到三十五
01-20 1万+
Doublewrite Buffer是MySQL数据库中InnoDB存储引擎的一种机制，用于解决部分写失效的问题，提高数据完整性和可靠性。Doublewrite Buffer是内存+磁盘的结构，包括内存结构和磁盘结构两个部分。在内存结构中，Doublewrite Buffer由128个页（Page）构成，大小是2MB。这些页在内存中以Doublewrite Buffer的形式存在。
mysql 双写性能_mysql和redis双写一致性策略分析
weixin_31518415的博客
01-26 406
mysql和redis双写一致性策略分析一.什么是双写一致性当我们更新了mysql中的数据后也可以同时保证redis中的数据同步更新；数据读取的流程：1.读取redis,如果value!=null,直接返回；2.如果redis中value=null，读取mysql中数据对应的value，将key-value保存在redis中；双写一致性策略：策略1：先更新缓存，再更新数据库；策略2：先更新数据库，...
MySQL特性两次写（double write）的在故障恢复时几种情况的分析【双写】【doublewrite buffer】
theten52的博客
04-17 681
在学习MySQL双写特性的时候一直有个问题萦绕在我的心头：我们都知道MySQL在进行脏页刷新的时候会先将【内存中的doublewrite buffer】中的数据刷新到【磁盘中共享表空间的doublewrite buffer】中，然后在将脏页数据刷新到【磁盘数据文件.idb】中。当系统发生故障后MySQL可以利用undo log和来完成故障恢复工作。那么当系统在刷新脏页数据到【磁盘中共享表空间的doublewrite buffer】时发生了故障，且此时【磁盘中共享表空间的doublewrite buffer.
微服务实现mongodb和mysql双写
最新发布
06-12
在微服务架构中实现MongoDB和MySQL的双写（即数据同时写入两个数据库）可以通过以下几个步骤来完成： 1. **服务设计**: - 创建两个独立的服务，分别处理MongoDB和MySQL的数据存储。 - 每个服务可能包含业务逻辑和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值