Gitness项目中Drone流水线转换器缓存机制解析
2025-05-04 06:13:05作者:袁立春Spencer
在Gitness项目(原Drone)的持续集成系统中,流水线配置转换器(Converter)的缓存机制是一个值得关注的技术点。这个机制虽然能提高性能,但在某些特定场景下可能会带来一些困扰。
缓存机制的工作原理
Gitness系统内部实现了一个基于LRU(最近最少使用)算法的缓存系统,专门用于存储流水线配置文件的转换结果。这个缓存系统会为每个转换请求生成一个唯一的缓存键,该键由仓库ID、提交SHA等多个参数组合而成。
当系统需要获取流水线配置时,会首先检查缓存中是否已存在对应的转换结果。如果存在,则直接返回缓存结果;如果不存在,才会执行实际的转换操作并将结果存入缓存。
缓存带来的潜在问题
在实际使用中,特别是当开发者使用外部转换插件(如Starlark转换器)时,可能会遇到以下情况:
- 更新了转换插件的逻辑或组件后,系统仍然使用旧的缓存结果
- 修改了转换器依赖的脚本或模板,但变更未立即生效
- 需要强制重新解析流水线配置时遇到阻碍
这些问题本质上是因为缓存机制保留了旧的转换结果,而没有及时感知到外部依赖的变化。
解决方案:禁用缓存
Gitness项目提供了一个环境变量DRONE_CONVERT_PLUGIN_CACHE_SIZE来控制这个缓存行为。通过将其设置为0,可以完全禁用转换器的缓存功能:
DRONE_CONVERT_PLUGIN_CACHE_SIZE=0
禁用缓存后,系统会在每次需要获取流水线配置时都执行完整的转换过程,确保总是使用最新的转换逻辑和依赖。这对于开发和调试转换插件特别有用,可以立即看到修改后的效果。
适用场景建议
虽然禁用缓存能解决上述问题,但也会带来一定的性能开销。因此,建议根据实际场景灵活选择:
- 在开发和测试转换插件时,可以禁用缓存
- 在生产环境中,建议保留一定大小的缓存以提高性能
- 对于配置变更频繁的项目,可以考虑较小的缓存尺寸
理解这一机制有助于开发者更好地利用Gitness系统的能力,在保证开发效率的同时,也能在生产环境中获得最佳性能。
登录后查看全文
热门项目推荐
相关项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedJavaScript097- DDeepSeek-V4-ProDeepSeek-V4-Pro(总参数 1.6 万亿,激活 49B)面向复杂推理和高级编程任务,在代码竞赛、数学推理、Agent 工作流等场景表现优异,性能接近国际前沿闭源模型。Python00
MiMo-V2.5-ProMiMo-V2.5-Pro作为旗舰模型,擅⻓处理复杂Agent任务,单次任务可完成近千次⼯具调⽤与⼗余轮上 下⽂压缩。Python00
GLM-5.1GLM-5.1是智谱迄今最智能的旗舰模型,也是目前全球最强的开源模型。GLM-5.1大大提高了代码能力,在完成长程任务方面提升尤为显著。和此前分钟级交互的模型不同,它能够在一次任务中独立、持续工作超过8小时,期间自主规划、执行、自我进化,最终交付完整的工程级成果。Jinja00
Kimi-K2.6Kimi K2.6 是一款开源的原生多模态智能体模型,在长程编码、编码驱动设计、主动自主执行以及群体任务编排等实用能力方面实现了显著提升。Python00
MiniMax-M2.7MiniMax-M2.7 是我们首个深度参与自身进化过程的模型。M2.7 具备构建复杂智能体应用框架的能力,能够借助智能体团队、复杂技能以及动态工具搜索,完成高度精细的生产力任务。Python00
项目优选
收起
暂无描述
Dockerfile
700
4.5 K
Ascend Extension for PyTorch
Python
563
691
Claude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed.
Get Started
JavaScript
535
95
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
957
953
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
411
338
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
1.6 K
939
Oohos_react_native
React Native鸿蒙化仓库
C++
340
387
AscendNPU-IR是基于MLIR(Multi-Level Intermediate Representation)构建的,面向昇腾亲和算子编译时使用的中间表示,提供昇腾完备表达能力,通过编译优化提升昇腾AI处理器计算效率,支持通过生态框架使能昇腾AI处理器与深度调优
C++
128
209
昇腾LLM分布式训练框架
Python
148
177
华为昇腾面向大规模分布式训练的多模态大模型套件,支撑多模态生成、多模态理解。
Python
140
221