OpenJ9垃圾回收器Balanced策略的Copy Cache优化分析
背景介绍
OpenJ9虚拟机是IBM贡献给Eclipse基金会的高性能Java虚拟机实现。在OpenJ9中,Balanced GC策略是一种针对大内存系统优化的垃圾回收算法,旨在提供可预测的停顿时间和高吞吐量。然而,在实际使用中发现,Balanced策略在初始化阶段会创建过多的Copy Cache(复制缓存),导致内存占用过高和启动时间延长的问题。
问题现象
当使用Balanced GC策略启动大堆内存(如12TB)的Java应用时,会观察到以下现象:
- 初始化阶段需要创建约15GB的Copy Cache
- 启动时间显著延长(数秒级别)
- 在16GB内存的测试机器上,无法启动更大的堆内存配置
相比之下,使用Gencon(分代并发)GC策略时,即使配置72TB的堆内存,也仅需约3GB的初始内存提交,主要是用于Work Packets。
性能分析
通过CPU性能剖析工具(perf)收集的数据显示:
- 在Balanced策略下,24.84%的时间花费在内核的页面清除操作上
- 19.56%的时间用于CopyScanCacheChunkVLHGC的初始化
- 18.18%的时间用于处理用户地址错误
这表明内存初始化的开销占据了启动时间的主要部分。
技术原理
Copy Cache是Balanced GC策略中用于对象复制操作的内存缓冲区。每个Copy Cache包含一定数量的内存块,用于在垃圾回收过程中临时存储被移动的对象。Balanced策略原本的设计会预先分配大量的Copy Cache,以确保在GC过程中有足够的内存空间进行对象移动。
这种预分配策略虽然可以避免GC过程中的动态分配开销,但带来了两个问题:
- 内存占用过高:在大堆配置下,Copy Cache的总大小可能达到GB级别
- 初始化时间长:需要清零大量内存页面,导致启动延迟
解决方案
开发团队通过优化Copy Cache的分配策略解决了这个问题。主要改进包括:
- 动态调整Copy Cache的初始数量,避免过度预分配
- 实现按需增长的机制,在GC过程中根据需要动态增加Copy Cache
- 优化内存初始化路径,减少页面清零的开销
这些优化显著降低了Balanced GC策略的初始内存占用和启动时间,使其能够支持更大的堆内存配置。
实际效果
优化后的Balanced GC策略:
- 初始内存占用大幅降低
- 启动时间明显缩短
- 能够支持更大的堆内存配置
- 保持了原有的GC性能和停顿时间特性
这使得Balanced GC策略更适合用于大内存、高性能的Java应用场景。
总结
OpenJ9团队对Balanced GC策略的Copy Cache分配机制进行了重要优化,解决了大堆内存配置下的启动问题。这一改进体现了垃圾回收器设计中内存使用效率和性能之间的平衡艺术,也为用户提供了更好的使用体验。对于需要处理海量数据的Java应用,优化后的Balanced GC策略将是一个更具吸引力的选择。
kernelopenEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。C091
baihu-dataset异构数据集“白虎”正式开源——首批开放10w+条真实机器人动作数据,构建具身智能标准化训练基座。00
mindquantumMindQuantum is a general software library supporting the development of applications for quantum computation.Python058
PaddleOCR-VLPaddleOCR-VL 是一款顶尖且资源高效的文档解析专用模型。其核心组件为 PaddleOCR-VL-0.9B,这是一款精简却功能强大的视觉语言模型(VLM)。该模型融合了 NaViT 风格的动态分辨率视觉编码器与 ERNIE-4.5-0.3B 语言模型,可实现精准的元素识别。Python00
GLM-4.7GLM-4.7上线并开源。新版本面向Coding场景强化了编码能力、长程任务规划与工具协同,并在多项主流公开基准测试中取得开源模型中的领先表现。 目前,GLM-4.7已通过BigModel.cn提供API,并在z.ai全栈开发模式中上线Skills模块,支持多模态任务的统一规划与协作。Jinja00
AgentCPM-Explore没有万亿参数的算力堆砌,没有百万级数据的暴力灌入,清华大学自然语言处理实验室、中国人民大学、面壁智能与 OpenBMB 开源社区联合研发的 AgentCPM-Explore 智能体模型基于仅 4B 参数的模型,在深度探索类任务上取得同尺寸模型 SOTA、越级赶上甚至超越 8B 级 SOTA 模型、比肩部分 30B 级以上和闭源大模型的效果,真正让大模型的长程任务处理能力有望部署于端侧。Jinja00