嵌入式Linux设备偶发死机,重启后只看到一屏Oops或者Kernel panic日志,很多人会先盯着最后一行报错。真正定位问题时,最后一行往往只告诉你系统已经崩溃,根因可能藏在前面的异常地址、寄存器和调用栈里。面试官问这个问题,重点是看你有没有一套能落地的日志定位顺序。

面试官提问

嵌入式Linux运行时出现Kernel Oops或Kernel Panic,串口日志里有寄存器和Call Trace,你会先看哪些信息?

嵌入式Linux设备通过串口读取pstore和ramoops日志定位Kernel Oops调用栈的终端截图

面试回答思路

先把完整日志保存下来,确认内核版本、CPU、当前进程和异常原因,再看PC/LR、异常地址和Call Trace。Oops通常表示内核发生了异常访问或错误,但不一定每次都会立即让整个系统停机;Panic则表示内核进入无法继续运行的致命状态,或配置为遇到Oops就触发Panic。定位地址时必须使用与当前运行内核完全匹配的vmlinux、模块和符号信息,不能拿另一个版本的System.map硬套。

先分清Oops和Panic,不要把它们当成同一个报错

Oops通常是内核检测到异常访问或内部错误后打印的诊断信息,系统有时还能继续运行,但已经处于不可靠状态;如果错误影响关键路径,或者系统配置为Oops后panic,就会进一步出现Kernel panic。Panic意味着内核无法安全继续运行,现场需要先保证日志被完整保存。

Call Trace要结合异常地址和寄存器一起看

先看Unable to handle kernel NULL pointer dereference、page fault或其他异常原因,再看CPU、PID、Comm、PC、LR和寄存器内容。Call Trace列出异常发生时的调用路径,但最靠近异常点的函数不一定就是最初引入错误的地方;也可能是上游传入了无效指针、资源已经释放,或者并发时序出了问题。

符号化必须使用匹配版本的内核和模块

如果日志里只有地址,需要拿运行时对应的vmlinux、System.map和模块文件进行符号解析。内核开启CONFIG_DEBUG_INFO后,可以使用内核提供的decode_stacktrace脚本等工具辅助还原函数和源码位置。量产设备还要考虑日志留存,可以通过串口、pstore/ramoops或kdump等机制保留崩溃现场。

Kernel Oops/Panic日志的排查顺序

Kernel Oops/Panic日志的排查顺序

面试官可能继续追问

面试时可以补充:如果设备崩溃后无法再执行dmesg,就要提前设计日志留存,例如串口控制台、pstore/ramoops或kdump。现场最怕的不是出现一次Oops,而是重启之后没有留下足够的信息,导致问题无法复现和定位。