pstore 存储内核崩溃日志

前言

在 Linux 操作系统中，pstore 是一种持久性存储机制，允许在系统崩溃或重启时保留有价值的调试信息。通过 pstore，系统管理员和开发人员可以收集和分析系统故障信息，帮助快速诊断和解决问题。本文将介绍 pstore 的基本概念、配置方法以及其在实际调试中的应用。

什么是 pstore？

pstore（Persistent Storage）是 Linux 内核提供的一种机制，最初是用于系统发生oops 或 panic 时，自动保存内核 log buffer 中的日志。不过在当前内核版本中，其已经支持了更多的功能，如保存 console 日志、ftrace 消息和用户空间日志。同时，它还支持将这些消息保存在不同的存储设备中，如内存、块设备或 mtd 设备。 为了提高灵活性和可扩展性，pstore 将以上功能分别抽象为前端和后端，其中像 dmesg、console 等为 pstore 提供数据的模块称为前端，而内存设备、块设备等用于存储数据的模块称为后端，pstore core 则分别为它们提供相关的注册接口。

通过模块化的设计，实现了前端和后端的解耦，因此若某些模块需要利用 pstore 保存信息，就可以方便地向 pstore 添加新的前端。而若需要将 pstore 数据保存到新的存储设备上，也可以通过向其添加后端设备的方式完成。

pstore 的工作原理

当系统发生崩溃或内核恐慌时，pstore 会捕获相关信息并将其存储在非易失性存储介质中。下次系统启动时，这些信息可以从 pstore 中读取并用于分析故障原因。

怎么用

就像把大象装入冰箱只需要打开冰箱，把大象放进去，关上冰箱门的 3 个步骤，使用 pstore 也只需要 3 个步骤：

1. 使能 pstore
2. 挂载 pstore 文件系统
3. 读取转存的日志文件

使能

在使用 pstore 之前，需要确保内核已启用相关配置选项。这些选项通常包括：

CONFIG_PSTORE：启用 pstore 支持
CONFIG_PSTORE_CONSOLE：捕获控制台日志
CONFIG_PSTORE_PMSG：捕获平台消息
CONFIG_PSTORE_FTRACE：捕获 ftrace 日志
CONFIG_PSTORE_RAM：使用内存作为存储介质

在启用了内核配置并重新编译内核后，需要加载 pstore 模块：

sudo modprobe pstore

检查和挂载 pstore 文件系统

pstore 文件系统通常挂载在 /sys/fs/pstore 目录下。可以通过以下命令检查是否已挂载：

mount | grep pstore

如果未挂载，可以手动挂载：

sudo mount -t pstore pstore /sys/fs/pstore

使用 pstore 收集调试信息

系统崩溃或内核恐慌后，可以从 /sys/fs/pstore 目录中读取存储的调试信息。以下是一些常见的文件类型：

dmesg-*：内核环缓冲区日志（dmesg 日志）
console-*：控制台日志
pmsg-*：平台消息日志
ftrace-*：ftrace 调试日志

示例

当系统崩溃后，重新启动并检查 /sys/fs/pstore 目录：

ls /sys/fs/pstore

你可能会看到类似以下的文件：

dmesg-ramoops-0
console-ramoops-0

可以使用 cat 命令查看这些文件的内容：

cat /sys/fs/pstore/dmesg-ramoops-0

清理 pstore

分析完调试信息后，可以通过以下命令清理 pstore 中的文件：

sudo rm /sys/fs/pstore/*

pstore 的实际应用场景

1. 内核恐慌调试
   当系统发生内核恐慌时，pstore 能够捕获并存储内核日志。这些日志可以用于分析导致恐慌的原因，从而帮助开发人员修复内核中的问题。

2. 系统崩溃恢复
   在系统崩溃后，通过 pstore 收集的日志信息，可以帮助系统管理员快速定位问题，从而减少系统停机时间。

3. 记录不可预见的故障
   pstore 可以记录在系统正常运行期间无法捕捉的故障信息，提供了一个可靠的方式来捕获意外问题。

注意事项

存储空间限制：由于 pstore 使用的存储介质通常是有限的（如 NVRAM），需要注意存储空间的管理和清理。
安全性：pstore 中存储的调试信息可能包含敏感数据，应注意访问控制和数据保护。

总结

pstore 是 Linux 系统中一个强大的调试工具，能够在系统崩溃或内核恐慌时提供宝贵的调试信息。通过正确配置和使用 pstore，系统管理员和开发人员可以显著提高问题诊断和解决的效率，从而提升系统的稳定性和可靠性。希望这篇博客能够帮助你更好地理解和应用 pstore 进行系统调试和故障排除。