首页
/ Fleet项目OCI存储垃圾回收机制解析

Fleet项目OCI存储垃圾回收机制解析

2025-07-10 17:04:04作者:秋阔奎Evelyn

背景与需求

在现代容器化应用管理中,OCI(Open Container Initiative)存储作为容器镜像和制品的事实标准存储格式,被广泛应用于各类云原生平台。Rancher Fleet作为Kubernetes集群的持续部署解决方案,其核心功能之一就是管理OCI存储中的各类资源。随着使用规模的扩大,OCI存储中会积累大量不再使用的历史版本和临时文件,这就需要引入垃圾回收机制来释放存储空间。

技术实现要点

Fleet项目在v0.13.0-alpha.6版本中实现了基础的OCI存储垃圾回收功能,主要针对两类资源:

  1. OCI制品(Artifacts):包括容器镜像、Helm Chart等不再被任何部署引用的历史版本
  2. 密钥(Secrets):与OCI仓库认证相关的临时密钥凭证

该功能通过定期扫描OCI存储仓库,识别并清理满足以下条件的资源:

  • 超过指定保留期限的旧版本
  • 未被任何活跃部署引用的资源
  • 临时生成的中间文件

实现原理

垃圾回收机制采用标记-清除(Mark-Sweep)算法:

  1. 标记阶段:遍历所有活跃部署,标记正在使用的OCI资源
  2. 清除阶段:扫描整个OCI存储,删除所有未被标记的资源

为确保安全性,实现中加入了多重保护措施:

  • 双阶段确认机制,防止误删
  • 可配置的保留策略,允许设置最小保留版本数
  • 详细的审计日志,记录所有清理操作

实际应用验证

该功能已在Rancher v2.12.0-rc1版本中完成集成测试,配合Fleet 107.0.0+up0.13.0-alpha.6版本验证通过。测试场景包括:

  • 多版本Helm Chart的自动清理
  • 大规模部署场景下的性能测试
  • 异常情况下的恢复机制验证

最佳实践建议

对于生产环境使用,建议配置以下参数:

  • 设置合理的保留策略,平衡存储利用和历史回溯需求
  • 在非高峰期执行垃圾回收操作
  • 监控垃圾回收的执行日志和指标
  • 首次启用时先在测试环境验证效果

未来展望

当前实现提供了基础的垃圾回收能力,后续可考虑增强:

  • 基于存储压力的动态回收策略
  • 更细粒度的资源分类回收
  • 与集群自动扩缩容机制的联动

通过引入垃圾回收机制,Fleet项目显著提升了OCI存储资源的管理效率,为大规模集群部署提供了更好的资源保障。

登录后查看全文
热门项目推荐
相关项目推荐

项目优选

收起
kernelkernel
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
509
550
docsdocs
暂无描述
Markdown
852
5.68 K
ops-transformerops-transformer
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
1.04 K
2.48 K
kernelkernel
deepin linux kernel
C
33
16
pytorchpytorch
作为 Ascend for PyTorch 社区的核心组件,TorchNPU 是昇腾专为 PyTorch 打造的深度学习适配插件,使 PyTorch 框架能够直接调用昇腾 NPU,为开发者提供昇腾 AI 处理器的超强算力。
Python
838
1.27 K
ops-nnops-nn
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
844
1.69 K
jiuwenswarmjiuwenswarm
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
3.16 K
856
ops-mathops-math
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
1.25 K
1.37 K
AscendNPU-IRAscendNPU-IR
AscendNPU-IR是基于MLIR(Multi-Level Intermediate Representation)构建的,面向昇腾亲和算子编译时使用的中间表示,提供昇腾完备表达能力,通过编译优化提升昇腾AI处理器计算效率,支持通过生态框架使能昇腾AI处理器与深度调优
C++
502
345
cann-learning-hubcann-learning-hub
CANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。
Jupyter Notebook
783
410