Nightingale告警自愈任务并行执行主键冲突问题分析

问题背景

在使用Nightingale V7.7.2版本时，用户发现告警自愈功能在执行多个机器并行任务时出现错误，而单个主机执行则正常。错误信息显示为数据库主键冲突，具体表现为"Duplicate entry '41' for key 'PRIMARY'"。

错误现象

当尝试并行执行任务时，系统日志中会记录以下错误信息：

Error 1062: Duplicate entry '41' for key 'PRIMARY'
[0.185ms] [rows:0] INSERT INTO `task_host_doing` (`host`,`clock`,`action`,`id`) VALUES ('devk8sm02',1735525632,'start',41)
cannot run waiting hosts: Error 1062: Duplicate entry '41' for key 'PRIMARY'

问题根源

经过分析，这个问题主要出现在从Nightingale V6版本升级到V7版本的过程中。V7版本对task_host_doing表结构进行了变更，但升级过程中可能没有正确处理表结构的迁移。

具体来说，task_host_doing表在V7版本中：

1. 主键定义可能发生了变化
2. 字段约束可能有所调整
3. 索引结构可能被优化

解决方案

对于此问题，最直接的解决方法是重建task_host_doing表：

1. 备份现有数据（如有重要数据）
2. 删除原有task_host_doing表
3. 让系统自动重建表结构
4. 或者手动执行最新的建表SQL

重建后，并行任务执行功能即可恢复正常。

技术建议

对于类似升级场景，建议：

1. 在升级前仔细阅读版本变更说明，特别是数据库结构变更部分
2. 对于生产环境，先在测试环境验证升级过程
3. 升级后检查各功能模块是否正常
4. 对于关键表结构变更，考虑编写专门的迁移脚本
5. 监控升级后的系统日志，及时发现潜在问题

总结

数据库表结构变更在系统升级中是常见情况，正确处理表结构迁移是保证系统稳定运行的关键。Nightingale从V6到V7的升级中，task_host_doing表的结构变更导致了并行任务执行时的主键冲突问题，通过重建表结构即可解决。这提醒我们在系统升级时要特别关注数据库层面的变更，并做好相应的迁移准备。