目录
问题
客户反馈功能不可用,经过定位发现是
Object result = redisClient.getBucket(key,new StringCodec()).get();
这段代码result返回为null导致后续流程没有执行
- 增加了日志及test case,发现在Redis set没有问题,而get结果为null,相同的test case 在预生产环境和测试环境都可以正常get到值
- 初步猜测是生产环境Redis集群导致的问题
- 登录到集群后查看日志发现如下日志
Clear FAIL state for node xxxxxxxx: slave is reachable again
- 登录从节点服务器查看日志发现错误
Unable to AUTH to MASTER: -ERR invalid password
- 通过错误判断是因为密码错误导致与master节点建立连接失败;
- 于是查看各节点redis.conf配置,发现各节点配置一样,但每个节点的redis.conf中masterauth密码与requirepass不一致;
- 将所有节点的masterauth密码与requirepass改为一致,并对各节点进行重启,并观察日志后发现不在报错,应用的问题也得到了解决,set get恢复正常,问题修复
参考资料
链接: