故障案例:定时备份可能引起的问题

原创 2015年07月10日 11:27:03

场景1:db内存1.5G,业务很少,平时qps不到10,每天凌晨5点到9点内存使用飙升到100%,内存100%时qps有个激增到20,cpu使用率也有激增


解决方法

1 查看缓冲池大小是900M

mysql> show variables like '%innodb_buffer_pool_size%';
+-------------------------+-----------+
| Variable_name           | Value     |
+-------------------------+-----------+
| innodb_buffer_pool_size | 943718400 |
+-------------------------+-----------+
1 row in set (0.00 sec)

2 查看缓冲池使用率 show engine innodb  status,查看还剩41226*16/1024=644M

Buffer pool size   57599
Free buffers       41226
Database pages     16326
Old database pages 6040
Modified db pages  13

3 因为周期性的原因,查看当时的定时备份时间,发现开始时间正好是晚上5点,确认是db备份引起的

backup_count: 7
backup_begintime: 5
backup_duration: 24
manual_backup_count: 3

4 因为mysqldump前会有一个flush tables with read lock的操作来记录下当前状态show master status,如果当前有查询,这个操作会等待所有当前查询完成后才执行。内存较少,建议客户升级内存,优化慢查询。


场景2:主库在每天凌晨3点,连接数突然从600激增到1200以上,并堆积许多慢查询,持续几个小时,其他监控参数都比较正常


解决方法

1 查看到当时的慢查询均是些简单SQL,SQL语句本身不存在问题

2 查看到主库备份时间为凌晨3点,确定是定时备份引起的

3 因为正好存在从库,后续将定时备份移到从库解决,mysqldump --dump-slave=2


故障案例--mongo备份文件损坏,导致mongorestore中断

故障现象 备份显示成功,不过有次准备用这个备份恢复数据库时,mongorestore却失败了,报错如下  2017-05-11T23:52:48.050+0800  Progress: 348...

GPS搜星故障问题的处理案例

  • 2015年11月06日 12:15
  • 1.59MB
  • 下载

企业备份方案设计干货参考:典型场景、典型问题及案例

随着企业的发展,IT信息中心会出现越来越多的业务系统,这些业务系统也会越来越复杂。单从使用者的角度看,可能也就几个业务模块。但仔细一梳理,会发现其组成部分包含存储、SAN网络、主机、数据库、中间件等,...
  • yincg
  • yincg
  • 2017年05月08日 14:57
  • 325

linux定时备份mysql数据库,及解决crontab执行时生成数据库文件为空的问题

一、用命令实现备份 进入MySQL的bin目录(mysql安装目录的下一级目录) 1、备份数据 #mysqldump -uusername -ppassword discuz >disc...

linux定时备份mysql数据库,及解决crontab执行时生成数据库文件为空的问题

linux定时备份mysql数据库

pci数据捕获和信号处理控制器的驱动安装解决方法(联想T410i隐藏分区故障引起的一系列问题)

      最近购买了一款联想T410i,默认给装了OEM XP系统,还有不少不太实用的软件,为了保证操作系统安全,联想还声称开发了一种叫ThinkVantage的系统恢复机制,但因此也给我带来了不小...
  • onhour
  • onhour
  • 2011年03月14日 16:58
  • 3717

RAC在OCR磁盘故障且无备份时快速恢复的方法

问题背景: 在刷业务库的过程出现IO访问磁盘失败!检查发现RAC进程全部退出!!!重新执行/opt/oracrs/bin/crsctl start crs失败 出错信息(tail -f /...
  • xyz846
  • xyz846
  • 2012年03月19日 14:19
  • 1366
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:故障案例:定时备份可能引起的问题
举报原因:
原因补充:

(最多只允许输入30个字)