OpenVelinux内核中的Kdump技术详解

什么是Kdump？

Kdump是Linux内核提供的一种崩溃转储机制，它利用kexec技术快速引导到一个专门用于捕获崩溃内存映像的转储内核。当生产内核(系统内核)发生崩溃时，Kdump机制能够保留系统内核的内存状态，并让转储内核将其保存为转储文件，供后续分析使用。

Kdump工作原理

Kdump的核心机制包含以下几个关键部分：

1. 内存保留：系统启动时，通过crashkernel参数保留一块专用内存区域给转储内核使用
2. 快速重启：通过kexec系统调用绕过BIOS直接加载转储内核
3. 内存保护：确保系统内核的DMA操作不会破坏保留内存区域
4. 内存转储：转储内核通过/proc/vmcore接口访问崩溃的系统内核内存

架构支持情况

Kdump目前支持以下处理器架构：

• x86 (32位)
• x86_64 (64位)
• ppc64 (PowerPC 64位)
• ia64 (Itanium)
• s390x (IBM Z系列)
• arm (32位ARM)
• arm64 (64位ARM)

系统配置要求

内核配置选项

系统内核需要配置的选项：

CONFIG_KEXEC=y          # 启用kexec系统调用
CONFIG_SYSFS=y          # 启用sysfs文件系统支持
CONFIG_DEBUG_INFO=y     # 启用内核调试信息

转储内核需要配置的选项：

CONFIG_CRASH_DUMP=y     # 启用崩溃转储支持
CONFIG_PROC_VMCORE=y    # 启用/proc/vmcore支持

架构特定配置

不同架构有各自的特殊配置要求：

x86/x86_64：

• 32位系统需要启用HIGHMEM支持
• 建议禁用SMP或设置maxcpus=1

PPC64：

• 需要启用可重定位内核支持

ARM：

• 建议启用AUTO_ZRELADDR选项

ARM64：

• 内核加载地址必须2MB对齐

安装与设置步骤

1. 安装kexec-tools工具包

kexec-tools是用户空间工具，用于加载转储内核。安装步骤包括：

1. 下载最新源码包
2. 解压并进入源码目录
3. 执行配置、编译和安装

2. 配置启动参数

在系统内核的启动参数中添加crashkernel参数，格式为：

crashkernel=<大小>@<起始地址>

典型配置示例：

• x86/x86_64: crashkernel=64M@16M
• ppc64: crashkernel=128M@32M
• ia64: crashkernel=256M@256M

3. 高级内存配置

对于内存变化较大的系统，可以使用扩展语法：

crashkernel=<范围1>:<大小1>[,<范围2>:<大小2>,...][@偏移]

例如：

crashkernel=512M-2G:64M,2G-:128M

加载转储内核

根据架构和内核类型，加载命令有所不同：

通用格式：

kexec -p <内核映像> \
--initrd=<initrd映像> \
--append="root=<根设备> <架构特定选项>"

架构特定启动选项：

• x86/x86_64: 1 irqpoll maxcpus=1 reset_devices
• ppc64: 1 maxcpus=1 noirqdistrib reset_devices
• arm/arm64: 1 maxcpus=1 reset_devices

触发与收集转储

触发崩溃的方式

1. 系统panic
2. 硬件看门狗触发的NMI
3. 关键进程(pid 0/1)崩溃
4. 中断上下文中发生崩溃
5. 手动触发：echo c > /proc/sysrq-trigger

保存转储文件

转储内核启动后，通过简单命令即可保存转储：

cp /proc/vmcore /var/crash/dumpfile

转储分析

使用GDB分析

gdb vmlinux /var/crash/dumpfile

使用Crash工具分析

Crash工具提供了更强大的分析能力，可以：

• 查看崩溃时的调用栈
• 检查内核数据结构
• 分析内存状态

高级功能

WARN()触发Kdump

通过设置内核参数可以使得WARN()触发panic进而触发Kdump：

echo 1 > /proc/sys/kernel/panic_on_warn

多CPU支持

虽然单CPU转储内核足以完成基本转储功能，但如需使用并行转储等高级功能，需要：

1. 构建SMP转储内核
2. 加载时适当设置CPU数量

常见问题解决

1. ELF头格式问题：在32位系统上可使用--elf32-core-headers选项
2. 驱动初始化失败：添加irqpoll启动参数
3. 内存热插拔：s390x架构支持动态ELF头创建，无需重新加载
4. 设备过多：s390x系统可使用cio_ignore参数忽略不相关设备

通过合理配置和使用Kdump，可以大大提高Linux系统故障诊断的效率和准确性。