Actions Runner Controller 在 GitHub Enterprise 3.14.1 版本下的 Runner 注册问题分析与解决方案
问题背景
在使用 Actions Runner Controller (ARC) 项目部署自托管 Runner 时,用户遇到了与 GitHub Enterprise 3.14.1 版本的兼容性问题。主要症状表现为 Runner 无法成功注册,控制器日志中显示"RunnerScaleSetNotFoundException"错误,提示找不到标识符为12的Runner规模集。
问题分析
根本原因
经过深入分析,这个问题并非真正的版本兼容性问题,而是由于ARC资源清理不彻底导致的。具体表现为:
- 在重新安装ARC时,之前的安装残留了未完全清理的Custom Resources
- 这些残留资源保留了finalizers(终结器),阻止了Kubernetes的正常清理流程
- 新安装的ARC尝试使用相同的标识符注册Runner时,与残留资源产生冲突
技术细节
在Kubernetes中,finalizers是一种保护机制,确保资源在被删除前完成必要的清理工作。然而在某些情况下,特别是当控制器意外终止或删除操作被中断时,这些finalizers可能会被"卡住",导致资源无法被完全删除。
在ARC的场景中,以下资源类型特别容易出现这个问题:
- AutoscalingListeners
- EphemeralRunners
- RunnerScaleSets
解决方案
临时解决方案
对于已经出现问题的环境,可以手动清理残留资源:
-
首先检查所有相关的Custom Resources:
kubectl get AutoscalingListeners,EphemeralRunners,RunnerScaleSets -n <namespace> -
移除这些资源的finalizers:
kubectl get AutoscalingListeners -n <namespace> -o name | xargs -I {} kubectl patch {} -n <namespace> -p '{"metadata":{"finalizers":null}}' --type=merge -
对其他资源类型重复类似操作
最佳实践
为了避免此类问题,建议在升级或重新安装ARC时遵循以下步骤:
-
完全卸载现有安装:
helm uninstall <release-name> -
等待所有资源被完全清理(可能需要几分钟)
-
确认命名空间中没有残留资源:
kubectl get all,AutoscalingListeners,EphemeralRunners,RunnerScaleSets -n <namespace> -
确认可以删除命名空间(测试目的):
kubectl delete namespace <namespace> -
如果命名空间无法删除,说明仍有资源未清理,需要手动移除finalizers
-
确认清理完成后,再进行新版本的安装
预防措施
- 在升级ARC前,确保所有工作负载已完成
- 考虑在维护窗口期执行升级操作
- 监控卸载过程,确保所有资源被正确清理
- 对于生产环境,建议先在测试环境验证升级过程
总结
虽然这个问题表现为版本兼容性问题,但实际上是由于Kubernetes资源清理机制引起。理解Kubernetes的finalizer机制对于管理类似ARC这样的复杂Operator至关重要。通过遵循正确的卸载和安装流程,可以避免大多数此类问题。
对于未来版本,ARC团队已经意识到需要改进升级体验,可能会引入更健壮的清理机制和更明确的进度反馈,以帮助用户更好地管理生命周期操作。
GLM-5智谱 AI 正式发布 GLM-5,旨在应对复杂系统工程和长时域智能体任务。Jinja00
LongCat-AudioDiT-1BLongCat-AudioDiT 是一款基于扩散模型的文本转语音(TTS)模型,代表了当前该领域的最高水平(SOTA),它直接在波形潜空间中进行操作。00
jiuwenclawJiuwenClaw 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。Python0248- QQwen3.5-397B-A17BQwen3.5 实现了重大飞跃,整合了多模态学习、架构效率、强化学习规模以及全球可访问性等方面的突破性进展,旨在为开发者和企业赋予前所未有的能力与效率。Jinja00
AtomGit城市坐标计划AtomGit 城市坐标计划开启!让开源有坐标,让城市有星火。致力于与城市合伙人共同构建并长期运营一个健康、活跃的本地开发者生态。01
HivisionIDPhotos⚡️HivisionIDPhotos: a lightweight and efficient AI ID photos tools. 一个轻量级的AI证件照制作算法。Python05