Solid Queue 任务执行问题排查与解决方案

问题背景

在使用 Rails 8.0.0.1 和 Solid Queue 1.1.0 时，开发者遇到了任务无法执行的问题。具体表现为通过 ActiveJob 的 perform_later 方法创建的任务虽然成功入队，但在运行 bundle exec bin/jobs 命令后，任务并未按预期执行。

环境配置

开发环境为 macOS 系统，使用 PostgreSQL 15.9 作为数据库，Ruby 版本为 3.3.6。Solid Queue 的配置文件中设置了默认的调度器和工作者参数：

default: &default
  dispatchers:
    - polling_interval: 1
      batch_size: 500
  workers:
    - queues: "*"
      threads: 3
      processes: <%= ENV.fetch("JOB_CONCURRENCY", 1) %>
      polling_interval: 0.1

问题现象

1. 任务成功创建并存储在 solid_queue_jobs 表中
2. 运行 bin/jobs 命令后控制台无输出
3. 在 Rails 控制台中运行 SolidQueue::Cli.start 可以看到数据库查询日志，但任务仍未执行
4. 其他团队成员在相同配置下能正常工作

排查过程

日志定位

关键发现是 Solid Queue 默认将日志输出到 log/development.log 文件而非控制台。这与一些开发者熟悉的 DelayedJob 行为不同，容易造成误解。

错误分析

检查日志后发现任务实际上已经尝试执行，但因某些原因失败。失败记录存储在 solid_queue_failed_executions 表中，而非像 DelayedJob 那样在任务记录中直接显示错误信息。

解决方案

1. 检查正确的日志位置：开发时应查看 log/development.log 而非仅依赖控制台输出

2. 失败任务管理：

   • 查询 solid_queue_failed_executions 表获取失败详情
   • 考虑使用专门的作业管理界面查看和重试失败任务

3. 配置调整：

   # 在开发环境中可考虑增加日志可见性
   config.active_job.logger = ActiveSupport::Logger.new(STDOUT)
   

4. 监控机制：建立定期检查失败任务的机制，避免任务静默失败

技术要点

1. Solid Queue 采用与 Rails 集成的日志系统，默认遵循 Rails 的日志配置

2. 任务执行状态分散在多个表中：

   • solid_queue_jobs：存储待处理任务
   • solid_queue_claimed_executions：记录被认领执行的任务
   • solid_queue_failed_executions：存储失败任务详情

3. 进程管理通过 solid_queue_processes 表实现，记录调度器和工作者的心跳信息

最佳实践建议

1. 开发环境下可配置更详细的日志输出：

   config.solid_queue.logger = ActiveSupport::Logger.new(STDOUT)
   config.solid_queue.log_level = :debug
   

2. 生产环境应建立任务监控系统，定期检查失败任务

3. 对于关键任务，实现错误通知机制，及时发现处理失败

4. 定期清理已完成任务，避免数据库膨胀：

   SolidQueue::Job.clear_finished_in_batches
   

通过理解 Solid Queue 的设计理念和日志机制，开发者可以更有效地排查和解决任务执行问题，确保后台任务系统的稳定运行。