Kube-Hetzner项目中Autoscaler无法缩容至0节点的问题分析
2025-06-28 14:05:36作者:宣海椒Queenly
在Kubernetes集群管理实践中,自动扩缩容功能对于优化资源利用率和降低成本至关重要。本文将深入分析Kube-Hetzner项目中Autoscaler无法将节点缩容至0的问题,并提供解决方案。
问题现象
在使用Kube-Hetzner项目部署Kubernetes集群时,配置了自动扩缩容节点池(Autoscaler Nodepools),期望在没有工作负载时能够自动缩容至0节点。然而实际运行中发现,即使没有需要调度的Pod,集群仍会保持至少一个节点运行,无法完全缩容。
根本原因
通过检查Autoscaler日志发现,关键错误信息表明:
node github-actions-runners-batman-66d1b255159f13bf cannot be removed: non-daemonset, non-mirrored, non-pdb-assigned kube-system pod present: hcloud-csi-controller-7dd59b5d75-pc7cr
这表明Hetzner CSI控制器Pod被调度到了工作节点而非控制平面节点上。由于CSI控制器属于关键系统组件,Autoscaler出于安全考虑会阻止节点被删除,从而导致无法缩容至0节点。
技术背景
在Kubernetes集群中,CSI(Container Storage Interface)控制器负责管理持久化存储的生命周期。通常这类关键系统组件应该:
- 部署在控制平面节点上
- 具有适当的节点亲和性(Node Affinity)配置
- 避免被调度到可能被Autoscaler移除的工作节点
Kube-Hetzner项目中默认的CSI控制器部署缺少这些配置,导致了上述问题。
解决方案
临时解决方案
在项目配置中设置disable_hetzner_csi = true可以禁用Hetzner CSI插件,从而解决Autoscaler无法缩容的问题。但这种方法会牺牲持久化存储功能,仅适用于不需要持久化存储的场景。
长期解决方案
更合理的解决方案应该修改CSI控制器的部署配置,确保它:
- 只被调度到控制平面节点
- 具有适当的节点亲和性规则
- 配置适当的容忍(Tolerations)以允许在控制平面节点上运行
这需要对Kube-Hetzner项目的Helm chart或部署清单进行修改,添加正确的调度约束。
最佳实践建议
- 关键系统组件(如CSI控制器、网络插件等)应该明确指定运行在控制平面节点
- 为这些组件配置适当的节点亲和性和容忍
- 在部署Autoscaler前,验证所有系统Pod的调度位置
- 考虑使用PodDisruptionBudget(PDB)保护关键工作负载
通过遵循这些实践,可以确保Autoscaler能够正常工作,同时保持集群关键功能的稳定性。
登录后查看全文
热门项目推荐
相关项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0213
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0138
uni-appA cross-platform framework using Vue.jsJavaScript08
GLM-5.2智谱开源 GLM-5.2,这是针对长文本任务的最新旗舰模型。相较于前代产品 GLM-5.1,它在长文本任务处理能力上实现了显著飞跃,并且首次在稳定的 100 万 token 上下文中提供这一能力。Jinja00
SwanLab⚡️SwanLab - an open-source, modern-design AI training tracking and visualization tool. Supports Cloud / Self-hosted use. Integrated with PyTorch / Transformers / LLaMA Factory / veRL/ Swift / Ultralytics / MMEngine / Keras etc.Python00
tiny-universe《大模型白盒子构建指南》:一个全手搓的Tiny-UniverseJupyter Notebook03
项目优选
收起
deepin linux kernel
C
32
16
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
469
465
暂无描述
Dockerfile
778
5.08 K
Ascend Extension for PyTorch
Python
757
968
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
876
2.03 K
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
697
1.4 K
昇腾LLM分布式训练框架
Python
185
231
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
2.25 K
676
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
1.1 K
1.14 K
本仓库是 Flutter SDK 与 Flutter Engine 的 OpenHarmony 适配版本,由 CPF-Flutter 团队维护。开发者可使用熟悉的 Flutter 技术栈开发 OpenHarmony 应用,3.35.7 及以后的适配版本可基于本仓库源码构建支持 OpenHarmony 的 Flutter Engine。
Dart
1.04 K
271