SolidQueue 中 ActiveStorage::AnalyzeJob 卡住问题的分析与解决
问题现象
在使用 SolidQueue 作为 ActiveJob 后端时,许多开发者报告 ActiveStorage::AnalyzeJob 会出现卡住不执行的情况。具体表现为:
- 作业被正确入队到 default 队列
- 作业状态显示为"in_progress"(已被 worker 获取)
- 但作业永远不会完成,一直处于挂起状态
- 其他类型的作业在相同队列中能正常执行
这个问题在 macOS 系统上尤为常见,特别是 M1/M2/M3 芯片的 Mac 设备,但在 Intel Mac 和 Windows 系统上也有报告。
根本原因分析
经过开发者社区的深入调查,发现问题根源在于 macOS 系统的安全机制与 Ruby 进程分叉(fork)的兼容性问题。
当 SolidQueue 的 worker 进程尝试 fork 子进程来处理作业时,macOS 的 Objective-C 运行时会触发安全机制,阻止某些初始化操作在 fork 后的子进程中执行。这导致 ActiveStorage 的分析过程无法正常完成。
解决方案
目前有以下几种解决方案:
-
环境变量方案(推荐) 在启动应用前设置环境变量:
export OBJC_DISABLE_INITIALIZE_FORK_SAFETY=YES或者直接在启动命令中加入:
OBJC_DISABLE_INITIALIZE_FORK_SAFETY=YES bin/dev -
配置调整方案 对于开发环境,可以尝试调整 SolidQueue 的配置,增加 worker 的 polling_interval:
development: workers: - polling_interval: 1 -
数据库连接池调整 确保数据库连接池大小足够:
default: &default pool: <%= ENV.fetch("RAILS_MAX_THREADS") { 5 } %>
技术背景
这个问题实际上是一个长期存在的 macOS 系统特性导致的。自 macOS High Sierra (10.13) 开始,系统引入了更严格的进程初始化安全检查机制。当 Ruby 应用服务器(如 Puma)使用 fork 模式时,就会触发这个安全机制。
ActiveStorage::AnalyzeJob 特别容易受到影响,因为它通常需要加载图像处理库(如 ImageMagick 或 libvips),这些库在初始化时可能会使用 Objective-C 运行时。
安全性考量
开发者可能会担心禁用这个安全检查是否安全。根据长期社区实践和相关技术分析,在生产环境中设置 OBJC_DISABLE_INITIALIZE_FORK_SAFETY=YES 是安全的,因为:
- 这个检查主要是针对 Objective-C 应用的防御机制
- Ruby 应用通常不依赖 Objective-C 的初始化过程
- 该环境变量已被 Ruby 社区广泛使用多年,没有报告安全问题
最佳实践建议
- 在开发环境中使用环境变量解决方案
- 在生产环境中考虑使用线程模式而非 fork 模式
- 定期检查 SolidQueue 和 Rails 的更新,未来版本可能会内置解决方案
- 对于关键业务,考虑实现作业超时机制,防止长时间挂起
通过以上分析和解决方案,开发者应该能够顺利解决 SolidQueue 中 ActiveStorage 分析作业卡住的问题,确保文件上传和分析功能正常工作。
Kimi-K2.5Kimi K2.5 是一款开源的原生多模态智能体模型,它在 Kimi-K2-Base 的基础上,通过对约 15 万亿混合视觉和文本 tokens 进行持续预训练构建而成。该模型将视觉与语言理解、高级智能体能力、即时模式与思考模式,以及对话式与智能体范式无缝融合。Python00
GLM-4.7-FlashGLM-4.7-Flash 是一款 30B-A3B MoE 模型。作为 30B 级别中的佼佼者,GLM-4.7-Flash 为追求性能与效率平衡的轻量化部署提供了全新选择。Jinja00
VLOOKVLOOK™ 是优雅好用的 Typora/Markdown 主题包和增强插件。 VLOOK™ is an elegant and practical THEME PACKAGE × ENHANCEMENT PLUGIN for Typora/Markdown.Less00
PaddleOCR-VL-1.5PaddleOCR-VL-1.5 是 PaddleOCR-VL 的新一代进阶模型,在 OmniDocBench v1.5 上实现了 94.5% 的全新 state-of-the-art 准确率。 为了严格评估模型在真实物理畸变下的鲁棒性——包括扫描伪影、倾斜、扭曲、屏幕拍摄和光照变化——我们提出了 Real5-OmniDocBench 基准测试集。实验结果表明,该增强模型在新构建的基准测试集上达到了 SOTA 性能。此外,我们通过整合印章识别和文本检测识别(text spotting)任务扩展了模型的能力,同时保持 0.9B 的超紧凑 VLM 规模,具备高效率特性。Python00
KuiklyUI基于KMP技术的高性能、全平台开发框架,具备统一代码库、极致易用性和动态灵活性。 Provide a high-performance, full-platform development framework with unified codebase, ultimate ease of use, and dynamic flexibility. 注意:本仓库为Github仓库镜像,PR或Issue请移步至Github发起,感谢支持!Kotlin07
compass-metrics-modelMetrics model project for the OSS CompassPython00