扩有mysql的磁盘,磁盘满了MySQL会做什么？

最近遇到一个故障和磁盘满有关系，并且同事也发现经常有磁盘满导致操作hang住无响应的情况，于是抽时间研究了一下这2种情况。

一、磁盘满了之后MySQL会做什么？

我们看下官方的说法

When a disk-full condition occurs, MySQL does the following:

* It checks once every minute to see whether there is enough space to write the current row. If there is enough space,it continues as if nothing had happened.

* Every 10 minutes it writes an entry to the log file, warning about the disk-full condition.

其实MySQL本身并不会做任何操作，如官方文档说说，只会每分钟check一次是否有空闲空间，并且10分钟写一次错误日志。

但是再次期间由于磁盘满了，意味着binlog无法更新，redo log也无法更新，所有buffer pool中的数据无法被flush上，如果不幸的服务器重启，或者实例被kill了，那必然会造成数据丢失，这几乎是一定的。所以，处理磁盘满的问题最好是先释放出来一定空间让dirty数据刷新下来。

二、磁盘满了为什么会导致操作hang住？

1、select

首先经过经验和实际测试，select操作不会由于磁盘满导致问题，也就是所有select操作都会正常运行。

2、insert

经过不通的测试发现，当磁盘满了之后，并不是第一个insert就卡住，而是会在n个之后出现卡住的情况。

通过查看error日志，发现卡住现象和刷磁盘的操作有关系。

[ERROR] /usr/local/mysql-5.1.42/libexec/mysqld: Disk is full writing './test/cj_webex.MYD'

[ERROR] /usr/local/mysql-5.1.42/libexec/mysqld: Disk is full writing './mysql-bin.000017'

为了验证推论是否正确，我们将sync_binlog设置为1，在这种情况下，insert第一条就卡住了，并且error log中直接报错提示写binlog失败。看来卡住确实和刷磁盘有关系。

目前已知和刷磁盘有关系的参数有3个，分别是sync_binlog，innodb_flush_log_tr_commit，和duoblewrite。

3、show slave status

在从库经过测试，操作会被卡住，这主要是由于执行show slave status需要获得LOCK_active_mi锁，然后锁上mi->data_lock，但是由于磁盘满了无法将io_thread中的数据写入到relay log中，导致io_thread持有mi->data_lock锁，这就导致了死锁。

所以，这就导致在磁盘满的情况下，执行show slave status操作会卡住。

4、show status

测试可以正常操作，但是如果先执行了show slave status操作的情况下，show status也会被卡住。这是因为执行show status需要锁上LOCK_status，而由于status状态中包含slave status，所以还需要锁上LOCK_active_mi。如果限制性了show slave status，这时候由于mi->data_lock死锁问题，导致io_thread不会释放LOCK_active_mi锁。这时候就导致show status和show slave status争抢同一把LOCK_active_mi锁，也形成了死锁。

所以，在磁盘满的情况下，如果先执行show slave status，后执行show status，连个操作都会卡住。

ps：3和4的结果可以参考，这篇blog《MySQL源代码管中窥豹(一)：磁盘写满之后，数据库show status受到阻塞的原因》http://my.oschina.net/llzx373/blog/224175

MySQL实战 | 01-当执行一条 select 语句时，MySQL 到底做了啥？

原文链接:当执行一条 select 语句时,MySQL 到底做了啥? 也许,你也跟我一样,在遇到数据库问题时,总时茫然失措,想重启解决问题,又怕导致数据丢失,更怕重启失败,影响业务. 就算重启成功了, ...

linux磁盘满了的处理

1.查看磁盘使用情况 cd  / df -h 如果 总量Size和Used一样,按就证明磁盘满了 2.查看当前文件下每个文件大小 du -sh * 一层一层去查,就可以查到占用空间最大的那个文件及产生 ...

为什么mysql要做主从复制？

为什么MySQL要做主从复制(读写分离)? 通俗来讲,如果对数据库的读和写都在同一个数据库服务器中操作,业务系统性能会降低. 为了提升业务系统性能,优化用户体验,可以通过做主从复制(读写分离)来减轻主 ...

通过xtrabackup工具对mysql数据库做全备

需求描述: 使用xtrabackup工具对mysql实例中的所有的数据库进行备份,并且将备份的过程输出到指定的日志文件中. 操作过程: 1.使用xtrabacup工具备份mysql实例 xtrabac ...

【sql】mysql数据库做两条数据替换的操作，不使用第三方变量

需求: 1.将数据库中两条数据中的唯一约束列  做值的替换 原始思想: 将两条数据查出来,在程序中设置第三方变量,进行两条数据的替换,然后将原始两条数据删除,将新的两条替换后的数据插入. 新思想: 1 ...

RAID5的创建(5块磁盘，三块做raid，两块做备份)

RAID5的创建(5块磁盘,三块做raid,两块做备份) 第一步:参考我的上一篇博客,用同样的方法添加5块硬盘.地址如下: https://www.cnblogs.com/Feng-L/p/11735 ...

Ubuntu 磁盘满了处理方法。

Ubuntu 磁盘满了处理方法: 1. 如果是虚拟机安装ubuntu,直接给虚拟机安装ubuntu 系统所在的盘符动态分配一点磁盘容量,就可以了. 2. 如果不是虚拟机安装ubuntu,那么有两个办法 ...

Linux服务器其中一个磁盘满了怎么办？在不做磁盘扩容的情况下，一个软连接就搞定。

适用环境要求:Linux系统及服务器.有管理员权限.存在多余空间的磁盘例如下图中"/home"在磁盘sda5中与"/"不属于同一块磁盘: 1.首先转移正在使用的 ...

Mysql 如何做双机热备和负载均衡

MySQL数据库没有增量备份的机制,但它提供了一种主从备份的机制,就是把主数据库的所有的数据同时写到备份数据库中.实现MySQL数据库的热备份. 下面是具体的主从热备份的步骤:假设主服务器A(mast ...

随机推荐

日志解析LogParse启动参数配置

-task task_stat1001to1010.yaml -log log4j_stat1001to1010.xml 用绝对路径

poj2528 线段树+离散化

由于坐标可能很大,此时需要离散化,将值转化为对应的坐标. #include #include using namespace std; ...

衣带渐宽终不悔，为伊消得人憔悴--DbHelper增强版

核心理念 如何使用 测试实例 数据库内详细数据信息 测试代码 数据库连接池测试 测试集 延伸 相关下载链接 前几日,写了一篇关于一个 轻量级数据持久化的框架的博客(点击浏览: http://blog. ...

寒假训练 A - A Knight's Journey 搜索

Background The knight is getting bored of seeing the same black and white squares again and again an ...

python数据分析所需要了解的操作。

import pandas as pd data_forest_fires = pd.read_csv("data/forestfires.csv", encoding='gbk' ...

Android 知识梳理

说明:本篇博客只是一个知识整理,因为网上对于Android的知识介绍足够多,因此我不再写相关文章(主要是因为我写的不如人家好),所以所有文章均来自网络,不贴原文章,只提供连接,因此本文旨在减少你对相关 ...

458 - The Decoder & C语言gets函数，字符输出输出 & toascii()

Write a complete program that will correctly decode a set of characters into a valid message. Your p ...

Reusing dialogs with a dialog pool--一个sql server service broker例子

一个sql server service broker例子 ----------------------------------- USE master GO -------------------- ...

[Spring MVC]学习笔记－－FreeMarker的使用

还是先贴出该例子存于github上的位置 https://github.com/lemonbar/spring-mvc-freemarker Sping-Framework 的官方文档简单列出了在sp ...