mysql连接获取超时问题初探

现场没法还原了,当时5月18日凌晨报错,事后看应用日志,发现凌晨开始有大量sql报错,异常信息如下:

Caused by: org.apache.ibatis.exceptions.PersistenceException: 
### Error querying database.  Cause: org.springframework.jdbc.CannotGetJdbcConnectionException: Failed to obtain JDBC Connection; 
nested exception is com.alibaba.druid.pool.GetConnectionTimeoutException: wait millis 20000, active 20, maxActive 1500

但分析报错的sql发现都是操作的同一个表,有定时任务对表的删除,有新请求对表的写入、更新

这个表的数据量也比较大,删除任务针对13天前的数据进行删除 (有时20-50w左右的数据量)。

如果是因为定时任务锁表,那可能后面几天 (19号,20号...)都应该报错才是,但只有18日报错,不能理解。

在看数据库服务器上的mysql日志,先show variables like '%log_error%'; 看日志的目录

在看对应目录下的日志文件,发现5月18日凌晨有异常关闭mysql服务,为什么关闭了?是人为、服务器断电?还是其他啥原因?

预知后事,还需要再看下linux操作系统日志 (/var/log/message或/var/log/syslog)

小白表示看不懂....搜了些fail error也的确有,但还是无法定位具体原因....

于是找来运维大哥帮忙一起看,大哥提示是否当时内存使用较高,发现数据库服务器的内存用完了!  

最后决定先升级数据库服务器内存 ,由16G升级到32G再观察后续表现

应用层面待改造

删除数据时不要根据条件一次性删除,先根据条件分页查出待删除数据,然后一条条根据主键删除,这样避免一次删除过多数据而锁表!

  • 5
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值