redis启动没反应_记一次线上Redis故障恢复和分析（一）

最新推荐文章于 2024-01-17 17:43:44 发布
最新推荐文章于 2024-01-17 17:43:44 发布
阅读量572 收藏
点赞数
文章标签： redis启动没反应
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39679091/article/details/111615690
版权
本文记录了一次线上Redis故障的始末，从App登录异常开始，经过服务器和代码层面的排查，最终定位到Redis集群中一台因内存不足无法启动的问题。通过增加内存和监控，解决了故障，但后续又遇到了操作异常问题，将在续篇中继续分析。
摘要由CSDN通过智能技术生成

写在前面的话

应某位友人需求，帮整理下工作中的发生的一些值得记录的文章。于是在友人口述后，表姐为其整理为了文章，供大家一起参考探讨。

一、起因

那天早上一到公司就有客服过来反应我们的App登录不了了，我赶紧试了一下登陆App，发现是可以登录的，就以为是个别现象没有在意。过了一会儿客服来反应更频繁了，这才意识到可能没有那么简单。

二、分析

一开始认为是服务器问题，检查了所有相关的应用服务器，应用是否正在运行，发现一切正常，cpu、内存、IO 都是正常的，没有异常；

然后考虑是否是代码层面问题(数据库问题被排除，因为一旦数据库出问题不可能只有一部分人受影响)，于是去检查日志，发现有以下错误信息：

d1062c47d93385e7c417f6893090a6bb.png

然后登陆redis控制台，一台一台测试，终于发现了有问题的那台机器：

最低0.47元/天 解锁文章
Redis宕机数据恢复指南
fudaihb的博客
04-13 945
Redis 是一个开源的使用 ANSI C 语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库。由于其出色的性能，Redis 被广泛应用于各种系统中用于缓存、消息队列等场景。然而，任何系统都有可能发生宕机，了解如何从 Redis 宕机中恢复数据是非常重要的。本篇博客将为你提供一个详细的指南，帮助你在 Redis 发生宕机时能够迅速有效地恢复数据。
记一次线上环境redis响应慢，导致雪崩
死磕音视频
10-18 673
前言 redis是主从加哨兵架构，java服务放在k8s上，使用springboot的actuator来进行健康检查。 故障原因如下，redis因为cpu激增，导致响应慢，断开了和java的连接，正好在k8s健康检查的时间内，检查到java服务不正常，k8s干掉了java服务，导致业务不正常。 解决思路 首先防止雪崩效应，避免雪球越滚越大，网络波动是我们避免不了的，我们也不能因为这个原因，去加大k8s检查间隙时间或者关闭k8s的健康检查，不能因为丢了西瓜去捡芝麻，所以更合适的解决办法是，sprin.
Redis 发生故障时，如何快速恢复服务？
最新发布
wxypython的博客
01-17 956
预防：通过监控和定期维护来预防潜在故障。备份：定期备份Redis数据，确保在发生故障时可以迅速恢复。自动化：使用Redis Sentinel或Cluster等自动化工具来管理故障转移和复制。测试：定期测试故障恢复计划，确保在真正的故障发生时能够快速响应。强烈建议在生产环境中配置Redis Sentinel或Cluster来提高Redis的高可用性和容错能力。此外，确保团队成员了解故障恢复过程和操作步骤。
13-redis持久化RDB和AOF
SO
10-19 141
RDB 简介 RDB是Redis Database的缩写，是redis持久化的一种方式，具体指的是在指定的时间间隔内，将数据集快照写入磁盘，也就是行话将的Snapshot快照，它恢复时是将快照直接读到内存中。redis会单独的fork(派生)出一个子进程来进行持久化，会将数据写入到一个临时文件中，待持久化过程都结束了，再用这个临时文件来替换上一次的持久化文件。整个过程中主程是不会进行任何IO操作的(持久化全部交给子进程)，这样就保证了极高的性能，如果需要进行大规模的数据恢复，且对于数据恢复的完整性不是很
头条二面：宕机后，Redis如何实现快速恢复？
Java知音
09-06 483
作者：Kaitokaito-kidd.com/2020/07/02/redis-sentinel/这篇文章，我们来看Redis是如何实现故障自动恢复的，它的实现正是要基于之前所讲的数据持...
redis服务启动失败的解决方法
热门推荐
qq_33440781的博客
05-29 6万+
最近学redis，就遇到了各种坑，在这里分享一下我是将redis做成后台安装，配置环境变量统统省略掉了。、 做成后台服务呢，首先，cd到redis的安装目录下，再cd到util，接着执行./install_server.sh然后修改服务名称，将原来的redis_6379更名为redisd，这样下次启动比较方便，命令如下：cd /etc/init.d/ mv redis_6379 redisd然后，
Redis无法启动问题
weixin_45293377的博客
09-19 474
1.Redis下载 Redis 支持 32 位和 64 位。这个需要根据你系统平台的实际情况选择。 Linux版本：https://redis.io/download Windows版本：https://github.com/microsoftarchive/redis/releases 可以选择msi文件进行运行，得到一个文件夹。 2.Redis启动 进入Redis文件夹中，输入cmd进入命令行，通过 ’ redis.windows-service.conf '来启动Redis。 若执行 redis
redis 获取不到_记一次PHP偶现获取不到Redis数据排查过程
weixin_39556590的博客
12-22 1244
李乐问题描述3月25号早晨8点左右线上回归时，发现getTestInfos接口部分请求返回空数据。kibana查询异常请求日志，输入参数正常；梳理接口业务逻辑，是根据输入参数从Redis查询数据返回空导致。进一步确认：1)Redis查询数据时未抛异常；2)Redis中确实存在该数据；3)只有偶尔部分请求无法从Redis获取数据。10点25左右，重启业务进程与confd，恢复正常。两个疑问：1)为什...
记一次mysql无法启动故障恢复和备份规划
王聚涛的专栏
11-19 465
一次深刻的教训（阿里云自建mysql，centos6.9，mysql5.6），没有对数据库备份足够的重视，升级服务没有做应急预案，导致线上环境停机4小时维护。事情经过： 1、应用需要升级， 2、阿里云提示系统有漏洞需要打补丁，需要重启服务器 3、停了应用服务，没有手工停mysql服务，重启服务器 4、部署好应用，发现mysql连接异常，一脸懵逼。 提示：Cannot connect to local MYSQL server through socket '/var/lib/mysql/mysql
Redis-复制（记一次redis加密平滑升级）
0-1的专栏
08-16 1910
Redis-复制 概要： 背景及redis加密升级方案讨论 redis复制原理 --------------------------------------------------------------------------------------------   一、背景 工作中，由历史原因使用的redis（版本2.8）集群是无密码的，因此需要进行密码升级。 单单谈redis...
解决redis服务启动失败的问题
12-16
最近学redis，就遇到了各种坑，在这里分享一下 我是将redis做成后台 安装，配置环境变量统统省略掉了。 做成后台服务呢，首先，cd到redis的安装目录下，再cd到util，接着执行 ./install_server.sh 然后修改服务名称，将原来的redis_6379更名为redisd，这样下次启动比较方便，命令如下： cd /etc/init.d/ mv redis_6379 redisd 然后，就可以启动redis服务了 service redisd start 启动之后，就可以进入redis的客户端了 redis-cli 到这里，万事大吉了？好像坑并没有结束，第二天，重新
Day09_Redis
weixin_45014721的博客
08-26 671
Redis本质上是一个Key-Value类型的内存数据库，很像memcached，整个数据库统统加载在内存当中进行操作，定期通过异步操作把数据库数据写入到硬盘上进行保存。
故障恢复
黑子
12-29 728
概述：用户必须做好相应的准备来应对Redis 的系统故障。如果我们决定要将Redis 用作应用程序唯一的数据存储手段， 那么就必须确保Redis 不会丢失任何数据。跟提供了ACID（ACID 是指原子性、一致性、隔离性和持久性，如果一个数据库想要实现可靠的数据事务，那么它就必须保证ACID 性质。）保证的传统关系数据库不同，在使用Redis为后端构建应用程序的时候，用户需要多做一些工作才能保证数据的
Redis无法启动
xionglaoye的博客
09-20 940
Redis无法启动 启动redis时一闪而过或者闪都不闪,而配置都是对的,redis却无法启动,原因在于你设置了持久化方式AOF 需要在命令行同时启动redis-server.exe和redis.windows.conf,建议自己写一个.bat文件方便执行命令 ...
windows命令行无法启动redis_解决redis 无法启动的问题
weixin_39981400的博客
01-30 1012
redis 无法启动怎么办呢，我们直接通过命令方式来启动吗，今天小编来为各位说说关于redis 无法启动的问题了，希望文章能够帮助到各位同学的哦。redis突然挂掉后，无法启动，查看log日志，发现报Short read or OOM loading DB. Unrecoverable error, aborting now解决办法：[root@localhost ~]# rm -f /var/l...
Redis操作无响应问题处理记录及总结
icarusliu的专栏
09-18 2082
项目中某个功能使用了Redis做缓存，使用代码如下： Map<String, String> map = new HashMap<>(16); configItems.stream() .map(ProductionLineConfigItemDTO::getDeviceId) .filter(Objects::nonNull) ...
Redis在故障恢复方面有哪些机制？Redis的数据读写性能如何？Redis的集群模式是如何实现的？如何使用Redis实现分布式计数器？
luoluoal的博客
07-06 428
当主节点不可用时，从节点会选举出一个新的主节点来接替原来的主节点的角色。当一个节点发生故障时，Redis Cluster会自动将该节点上的数据迁移到其他节点上，保证数据的可用性和一致性。需要注意的是，以上示例是单机环境下的计数器实现，如果要在分布式环境下使用Redis实现计数器，需要确保所有的客户端都能够连接到同一个Redis服务器，并且使用相同的键名来操作计数器。主节点将数据复制到一个或多个从节点，当主节点发生故障时，可以将一个从节点提升为新的主节点，保证系统的连续可用性。
linux redis-server 启动后没反应
澎湖Java架构师的博客
04-20 5081
按照 官网 安装好 redis后 运行 命令 redis-server 然后就卡在了 启动了redi-server 那 具体如图 这个时候 你按什么键都没用。 后来查了很多资料 发现都没说到点子上， 然后 问了人 发现是因为 守护进程没开 也就是windows 中的服务没开一样 所以 运行 redis-server 命令改为 redis-server --daemonize yes 就能正常运行了 注意的是 当你 卡在 之前的命令 按了 ctrl+z的话 会发现 你 运行 redis-cli 后 也是一样
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值