liburing项目中io_uring导致的系统冻结问题分析与修复
近期在Linux内核的io_uring子系统中发现了一个严重的系统冻结问题,该问题在用户同时挂起多个使用libuv库的Neovim实例时会被触发。本文将深入分析该问题的成因、影响范围以及最终的解决方案。
问题现象
当用户在Arch Linux或Fedora Rawhide系统上运行两个或多个Neovim实例,并通过Ctrl+Z挂起这些进程时,整个系统会进入近乎完全冻结的状态。具体表现为:
- 无法在终端输入任何命令
- 无法启动新的shell会话
- 部分简单命令(如通过SSH执行ls)仍可运行
- 系统日志中出现任务hung超过120秒的警告
问题定位
通过排查发现,该问题与io_uring子系统密切相关。当通过以下任一方式禁用io_uring功能时,问题不再出现:
- 设置环境变量UV_USE_IO_URING=0
- 通过sysctl设置kernel.io_uring_disabled=1
进一步分析表明,问题源于io_uring在进程退出时的资源清理机制。当多个使用io_uring的进程同时被挂起时,会导致工作队列(workqueue)的死锁情况。
技术原理
io_uring是现代Linux提供的高性能异步I/O接口,libuv等I/O库会利用它来提升性能。在进程退出时,io_uring需要通过工作队列来异步清理资源。原始实现中使用了system_unbound_wq作为工作队列。
问题发生时,系统出现了以下依赖链:
- 控制台输出需要等待工作队列刷新
- io_uring的退出操作需要工作队列执行
- 但工作队列本身可能被其他io_uring操作阻塞
这种循环依赖导致了系统级的死锁,特别是当多个进程同时触发io_uring清理时,问题更加明显。
解决方案
内核开发者Jens Axboe提出了针对性的修复方案,主要改动包括:
- 为io_uring退出操作创建专用的工作队列(iou_wq)
- 将io_uring的退出工作项提交到这个专用队列而非共享的system_unbound_wq
这种隔离措施有效避免了工作队列资源的竞争和死锁可能。修复补丁已被合并到Linux 6.9-rc3及后续版本中,并会反向移植到稳定分支。
影响评估
该问题影响所有使用io_uring的应用程序,当它们被批量挂起或终止时可能触发系统冻结。特别是:
- 使用libuv的应用程序(如Node.js、Neovim等)
- 直接使用io_uring接口的高性能服务器程序
- 多任务并行退出的场景
用户建议
对于无法立即升级内核的用户,可以采取以下临时解决方案:
- 禁用io_uring功能:
sysctl kernel.io_uring_disabled=1 - 对特定应用禁用io_uring支持:
UV_USE_IO_URING=0
长期解决方案是升级到包含修复补丁的Linux内核版本(6.9-rc3或更高版本)。
该案例展示了Linux内核异步I/O子系统的复杂性,也体现了开源社区快速响应和解决问题的效率。通过专用资源隔离来解决共享资源竞争问题,是系统编程中常见且有效的设计模式。
kernelopenEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。C042
MiniMax-M2.1从多语言软件开发自动化到复杂多步骤办公流程执行,MiniMax-M2.1 助力开发者构建下一代自主应用——全程保持完全透明、可控且易于获取。Python00
kylin-wayland-compositorkylin-wayland-compositor或kylin-wlcom(以下简称kywc)是一个基于wlroots编写的wayland合成器。 目前积极开发中,并作为默认显示服务器随openKylin系统发布。 该项目使用开源协议GPL-1.0-or-later,项目中来源于其他开源项目的文件或代码片段遵守原开源协议要求。C01
PaddleOCR-VLPaddleOCR-VL 是一款顶尖且资源高效的文档解析专用模型。其核心组件为 PaddleOCR-VL-0.9B,这是一款精简却功能强大的视觉语言模型(VLM)。该模型融合了 NaViT 风格的动态分辨率视觉编码器与 ERNIE-4.5-0.3B 语言模型,可实现精准的元素识别。Python00
GLM-4.7GLM-4.7上线并开源。新版本面向Coding场景强化了编码能力、长程任务规划与工具协同,并在多项主流公开基准测试中取得开源模型中的领先表现。 目前,GLM-4.7已通过BigModel.cn提供API,并在z.ai全栈开发模式中上线Skills模块,支持多模态任务的统一规划与协作。Jinja00
agent-studioopenJiuwen agent-studio提供零码、低码可视化开发和工作流编排,模型、知识库、插件等各资源管理能力TSX0121
Spark-Formalizer-X1-7BSpark-Formalizer 是由科大讯飞团队开发的专用大型语言模型,专注于数学自动形式化任务。该模型擅长将自然语言数学问题转化为精确的 Lean4 形式化语句,在形式化语句生成方面达到了业界领先水平。Python00