PrestoDB C++ CI 从CircleCI迁移到GitHub Actions的技术实践
2025-05-13 15:57:38作者:郁楠烈Hubert
背景介绍
PrestoDB作为一个开源的分布式SQL查询引擎,其核心部分使用C++实现。随着CircleCI服务即将在年底停止使用,开发团队面临着将现有的C++持续集成(CI)流水线迁移到GitHub Actions平台的技术挑战。本文将详细介绍这一迁移过程中的技术考量、解决方案以及最佳实践。
迁移的技术挑战
构建时间优化
在初始迁移尝试中,团队发现构建时间显著增加:
- Linux环境构建耗时约1小时20分钟
- macOS环境构建耗时高达2小时20分钟(由于需要从头编译所有依赖项)
编译器兼容性
迁移过程中需要确保使用最新版本的编译器工具链:
- 特别是macOS环境下,升级到Xcode 15以获得Clang 15的支持
- 新编译器带来了约33%的构建时间优化,使macOS构建时间降至1小时40分钟左右
迁移方案设计
最小可行性标准
团队确定了迁移的最低要求:
- 确保C++代码能够成功编译,并在CI中明确显示构建状态
- 所有单元测试必须运行并通过,测试结果需要在CI中清晰可见
资源规划
考虑到构建时间较长的问题,团队采取了以下措施:
- 申请更大的运行器资源以支持CI需求
- 预计在年底前获得足够的资金支持
技术实现细节
构建流程优化
通过分析原有CircleCI配置,团队重构了构建流程:
- 分离依赖项构建与项目构建阶段
- 实现构建缓存机制以减少重复工作
- 针对不同平台优化构建参数
测试集成方案
单元测试集成采用了分层策略:
- 核心功能测试作为必选项
- 扩展功能测试作为可选项目
- 测试结果收集与报告机制
性能对比与优化
迁移前后的性能对比显示:
- Linux环境构建时间基本保持稳定
- macOS环境经过编译器升级后,构建时间从2小时20分钟降至1小时40分钟
- 整体CI流水线吞吐量提升了约25%
经验总结
此次迁移工作为PrestoDB项目积累了宝贵的经验:
- 平台迁移需要充分考虑构建时间的增长因素
- 及时更新工具链可以带来显著的性能提升
- 资源规划是大型项目CI迁移成功的关键
- 分阶段实施可以降低迁移风险
未来展望
随着CI平台的稳定,团队计划进一步优化:
- 实现增量构建以减少开发周期的反馈时间
- 探索分布式构建方案以缩短整体构建时间
- 完善质量门禁机制,将静态分析集成到CI流程中
通过这次迁移,PrestoDB项目不仅解决了迫切的平台依赖问题,还为未来的持续集成与交付建立了更加健壮的基础设施。
登录后查看全文
热门项目推荐
相关项目推荐
Kimi-K2.5Kimi K2.5 是一款开源的原生多模态智能体模型,它在 Kimi-K2-Base 的基础上,通过对约 15 万亿混合视觉和文本 tokens 进行持续预训练构建而成。该模型将视觉与语言理解、高级智能体能力、即时模式与思考模式,以及对话式与智能体范式无缝融合。Python00
GLM-4.7-FlashGLM-4.7-Flash 是一款 30B-A3B MoE 模型。作为 30B 级别中的佼佼者,GLM-4.7-Flash 为追求性能与效率平衡的轻量化部署提供了全新选择。Jinja00
VLOOKVLOOK™ 是优雅好用的 Typora/Markdown 主题包和增强插件。 VLOOK™ is an elegant and practical THEME PACKAGE × ENHANCEMENT PLUGIN for Typora/Markdown.Less00
PaddleOCR-VL-1.5PaddleOCR-VL-1.5 是 PaddleOCR-VL 的新一代进阶模型,在 OmniDocBench v1.5 上实现了 94.5% 的全新 state-of-the-art 准确率。 为了严格评估模型在真实物理畸变下的鲁棒性——包括扫描伪影、倾斜、扭曲、屏幕拍摄和光照变化——我们提出了 Real5-OmniDocBench 基准测试集。实验结果表明,该增强模型在新构建的基准测试集上达到了 SOTA 性能。此外,我们通过整合印章识别和文本检测识别(text spotting)任务扩展了模型的能力,同时保持 0.9B 的超紧凑 VLM 规模,具备高效率特性。Python00
KuiklyUI基于KMP技术的高性能、全平台开发框架,具备统一代码库、极致易用性和动态灵活性。 Provide a high-performance, full-platform development framework with unified codebase, ultimate ease of use, and dynamic flexibility. 注意:本仓库为Github仓库镜像,PR或Issue请移步至Github发起,感谢支持!Kotlin07
compass-metrics-modelMetrics model project for the OSS CompassPython00
最新内容推荐
项目优选
收起
deepin linux kernel
C
27
11
OpenHarmony documentation | OpenHarmony开发者文档
Dockerfile
521
3.71 K
Nop Platform 2.0是基于可逆计算理论实现的采用面向语言编程范式的新一代低代码开发平台,包含基于全新原理从零开始研发的GraphQL引擎、ORM引擎、工作流引擎、报表引擎、规则引擎、批处理引引擎等完整设计。nop-entropy是它的后端部分,采用java语言实现,可选择集成Spring框架或者Quarkus框架。中小企业可以免费商用
Java
12
1
🔥LeetCode solutions in any programming language | 多种编程语言实现 LeetCode、《剑指 Offer(第 2 版)》、《程序员面试金典(第 6 版)》题解
Java
67
20
暂无简介
Dart
762
183
喝着茶写代码!最易用的自托管一站式代码托管平台,包含Git托管,代码审查,团队协作,软件包和CI/CD。
Go
23
0
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
1.32 K
740
无需学习 Kubernetes 的容器平台,在 Kubernetes 上构建、部署、组装和管理应用,无需 K8s 专业知识,全流程图形化管理
Go
16
1
React Native鸿蒙化仓库
JavaScript
302
348
基于golang开发的网关。具有各种插件,可以自行扩展,即插即用。此外,它可以快速帮助企业管理API服务,提高API服务的稳定性和安全性。
Go
22
1