Presto ORC模块JDK 17升级适配实践
背景概述
在Java生态系统中,JDK版本的升级往往伴随着字节码格式和API的变化。Presto项目作为Facebook开源的分布式SQL查询引擎,其ORC模块(presto-orc)在JDK 17环境下需要进行特定的适配工作。本文记录了该模块在JDK 17环境下的构建适配过程和技术要点。
技术挑战
当Java项目从较低版本升级到JDK 17时,通常会面临以下几个方面的挑战:
-
字节码版本兼容性:JDK 17默认生成的字节码版本与早期JDK不同,可能导致构建工具链的兼容性问题。
-
模块系统变化:从JDK 9引入的模块系统在后续版本中不断演进,可能影响依赖管理。
-
废弃API移除:JDK 17中移除了许多在早期版本中已被标记为废弃的API。
解决方案
针对presto-orc模块的JDK 17升级,主要采取了以下技术措施:
-
Maven构建配置调整:
- 更新maven-compiler-plugin配置,明确指定目标字节码版本
- 确保所有依赖项的版本与JDK 17兼容
- 处理可能存在的模块路径(module-path)相关问题
-
测试策略优化:
- 使用
-DskipTests参数暂时跳过测试阶段,专注于解决构建问题 - 分阶段验证,先确保基础构建通过,再处理测试用例
- 使用
-
依赖管理:
- 检查并更新所有第三方依赖的版本
- 特别关注ASM等字节码操作库的兼容性
实施细节
在实际操作中,开发团队执行了以下具体步骤:
-
在本地开发环境使用命令
./mvnw clean install -pl <module> -am -DskipTests验证构建过程。 -
分析构建失败日志,定位具体的不兼容问题。
-
针对每个不兼容点,研究JDK 17的变更文档,确定适配方案。
-
通过增量修改的方式,逐步解决所有构建问题。
经验总结
通过presto-orc模块的JDK 17升级实践,我们总结了以下经验:
-
渐进式升级:建议采用分模块、分阶段的方式升级,降低风险。
-
构建工具配置:Maven的插件版本和配置需要与目标JDK版本匹配。
-
持续集成验证:在CI/CD流水线中增加多版本JDK的构建验证,及早发现问题。
-
依赖管理策略:建立明确的依赖管理规范,避免引入不兼容的第三方库。
后续建议
对于计划进行JDK升级的项目,建议:
-
详细阅读Oracle官方发布的JDK迁移指南。
-
建立完整的测试覆盖,确保功能兼容性。
-
考虑使用jdeprscan等工具扫描废弃API的使用情况。
-
在团队内部进行技术分享,统一对JDK新特性的认识。
JDK升级不仅是版本号的变更,更是对项目技术债务的一次清理机会。通过规范的升级流程和充分的技术准备,可以确保升级过程平稳顺利。
Kimi-K2.5Kimi K2.5 是一款开源的原生多模态智能体模型,它在 Kimi-K2-Base 的基础上,通过对约 15 万亿混合视觉和文本 tokens 进行持续预训练构建而成。该模型将视觉与语言理解、高级智能体能力、即时模式与思考模式,以及对话式与智能体范式无缝融合。Python00
GLM-4.7-FlashGLM-4.7-Flash 是一款 30B-A3B MoE 模型。作为 30B 级别中的佼佼者,GLM-4.7-Flash 为追求性能与效率平衡的轻量化部署提供了全新选择。Jinja00
VLOOKVLOOK™ 是优雅好用的 Typora/Markdown 主题包和增强插件。 VLOOK™ is an elegant and practical THEME PACKAGE × ENHANCEMENT PLUGIN for Typora/Markdown.Less00
PaddleOCR-VL-1.5PaddleOCR-VL-1.5 是 PaddleOCR-VL 的新一代进阶模型,在 OmniDocBench v1.5 上实现了 94.5% 的全新 state-of-the-art 准确率。 为了严格评估模型在真实物理畸变下的鲁棒性——包括扫描伪影、倾斜、扭曲、屏幕拍摄和光照变化——我们提出了 Real5-OmniDocBench 基准测试集。实验结果表明,该增强模型在新构建的基准测试集上达到了 SOTA 性能。此外,我们通过整合印章识别和文本检测识别(text spotting)任务扩展了模型的能力,同时保持 0.9B 的超紧凑 VLM 规模,具备高效率特性。Python00
KuiklyUI基于KMP技术的高性能、全平台开发框架,具备统一代码库、极致易用性和动态灵活性。 Provide a high-performance, full-platform development framework with unified codebase, ultimate ease of use, and dynamic flexibility. 注意:本仓库为Github仓库镜像,PR或Issue请移步至Github发起,感谢支持!Kotlin07
compass-metrics-modelMetrics model project for the OSS CompassPython00