记录一次排查极光推送SDK死锁问题

线上服务出现mysql数据行被锁,更新时提示Lock wait timeout exceeded。发现只在极光推送后发生,通过日志观察及jstack定位到极光SDK的死锁问题。关键代码在NettyHttpClient.sendHttpRequest方法。升级极光SDK解决了死锁,提醒注意CountDownLatch的countDown操作,避免事务未提交导致的行锁。
摘要由CSDN通过智能技术生成

线上服务稳定了好几个月,这两天抽风,总是有mysql数据行被锁,update会报错(Lock wait timeout exceeded; try restarting transaction)

导致系统无法使用,害得我得一直在后台给用户解锁(通过mysql的kill命令)/(ㄒoㄒ)/~~


极光sdk版本(接入sdk时从官方文档复制的,一直没更新,可谁没事会去更新这个呢):

<!-- JPush -->
<dependency>
	<groupId>cn.jpush.api</groupId>
	<artifactId>jpush-client</artifactId>
	<version>3.2.15</version>
</dependency>
<dependency>
	<groupId>cn.jpush.api</groupId>
	<artifactId>jiguang-common</artifactId>
	<version>1.0.1</version>
</dependency>
<dependency>
	<groupId>io.netty</groupId>
	<artifactId>netty-all</artifactId>
	<version>4.1.6.Final</version>
</dependency>


通过mysql后台查询,会发现有几个事务一直不提交,一直锁住了数据。

由于之前一直后台功能一直正常,并没有往代码方面想,找了一天数据库原因未果(尼玛的)!

经过一天观察,发现只有遇到极光推送的地方才会加锁,而且是不定时出现,故重点观察极光推送代码(为log4j添加了打印线程id的配置)!

第一步:通过观察log,发现极光推送之后该线程在log中再也不出现了(只打印了关键代码3中LastHttpContent判定逻辑中的语句,死锁的原因)

通过jps和jstack定位到了极光sdk的死锁问题(真坑):

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值