Linux服务器崩溃急救指南

1.初步诊断与快速响应

观察服务器状态，通过 top、htop 或 vmstat 查看资源占用情况，识别高负载进程。
检查系统日志 /var/log/messages 或 journalctl -xe，定位错误信息或异常事件。
尝试通过 SSH 或其他远程管理工具连接，确认服务是否完全无响应。

2.系统资源不足处理

内存不足时，使用 free -m 确认内存使用，通过 ps aux --sort=-%mem 找出内存消耗大的进程并终止。
CPU 过载时，通过 mpstat -P ALL 检查各核心负载，使用 kill 或 renice 调整优先级或终止异常进程。
磁盘空间不足时，运行 df -h 查看分区使用率，清理日志文件（如 /var/log）或临时文件（/tmp）。

3.关键服务恢复

重启崩溃的服务，例如 systemctl restart nginx 或 service mysql restart。
检查服务依赖项，如数据库连接、端口冲突等，通过 netstat -tulnp 或 ss -tulnp 确认。
临时禁用非关键服务，释放资源保障核心业务运行。

4.内核与硬件故障排查

内核崩溃（Kernel Panic）时，检查 /var/log/kern.log 或 dmesg 获取堆栈跟踪信息。
硬件故障需通过 smartctl（硬盘检测）或 ipmitool（服务器管理接口）诊断。
考虑从备份恢复或启动到救援模式（Rescue Mode）修复文件系统。

5.数据备份与回滚

紧急情况下，优先备份关键数据到安全位置，使用 rsync 或 tar 打包。
若系统无法修复，从最近的备份镜像或快照回滚，确保业务连续性。

6.后续加固与监控

配置监控工具（如 Prometheus、Zabbix）实时预警资源阈值。
定期维护日志轮转（logrotate）和自动化清理任务（cron）。
更新内核及关键补丁，避免已知漏洞导致崩溃。