Mill编译器中关于增量编译问题的分析与解决
2025-07-01 12:25:13作者:凌朦慧Richard
在Scala生态系统中,Mill作为新一代构建工具,其增量编译机制与SBT有所不同。近期发现一个典型问题场景:当项目使用宏定义并配合typeCheckErrors进行编译时测试时,Mill编译器会抛出Failed to find name hashes异常,而同样的代码在SBT和Scala CLI中却能正常编译。
问题现象
在Mill 0.12.14版本中,当项目结构包含以下要素时会触发该问题:
- 使用Scala 3.7.1编译器
- 包含宏定义(通过
scala.quoted实现) - 测试代码中使用
scala.compiletime.testing.typeCheckErrors验证编译错误 - 采用非标准文件布局(混合SBT/Maven布局与Mill默认布局)
错误表现为编译器无法找到测试代码生成的特殊包对象($package类)的名称哈希值,导致增量编译过程中断。
技术背景
Mill的增量编译基于Zinc实现,但与SBT有以下关键差异:
- 文件布局:Mill默认采用扁平化目录结构(
src/下直接放scala文件),而SBT使用深层嵌套结构(src/main/scala/) - 类文件分析:Zinc在分析类文件依赖时需要维护名称哈希表,用于检测源代码变更
- 宏处理:当涉及编译时宏展开时,编译器会生成额外的合成类
根本原因
问题源于项目布局与构建配置的不匹配:
- 源代码采用SBT风格的
src/main/scala/目录结构 - 但build.sc中直接继承
ScalaModule而非SbtModule - 测试代码与主代码混用同一模块,未明确分离
这种配置冲突导致:
- Mill的增量编译器无法正确定位生成的合成类文件
- 名称哈希表构建过程出现断层
- 最终在分析阶段无法找到
$package类的哈希信息
解决方案
通过以下任一方式均可解决问题:
方案一:统一文件布局(推荐)
// build.sc
object internals extends ScalaModule {
def scalaVersion = "3.7.1"
// 将源文件移动到mill标准布局:src/internals/
}
方案二:显式声明SBT布局
// build.sc
object internals extends SbtModule {
def scalaVersion = "3.7.1"
object test extends SbtTests with TestModule.Utest
}
最佳实践建议
- 布局一致性:明确选择Mill标准布局或SBT布局并保持一致
- 模块分离:测试代码应放在独立的test模块中
- 宏代码隔离:将宏实现放在单独的子模块,减少对增量编译的影响
- 版本管理:保持Mill与Scala编译器版本的兼容性
深入理解
该问题揭示了构建工具的两个重要方面:
- 增量编译机制:依赖于精确的类文件分析和哈希跟踪
- 项目布局约定:不同构建工具对"标准"布局的理解差异可能导致微妙问题
对于跨构建工具的项目,建议在早期就明确布局规范,并在CI中增加多构建工具的验证环节,可以提前发现这类兼容性问题。
登录后查看全文
热门项目推荐
相关项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0214
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0138
uni-appA cross-platform framework using Vue.jsJavaScript08
GLM-5.2智谱开源 GLM-5.2,这是针对长文本任务的最新旗舰模型。相较于前代产品 GLM-5.1,它在长文本任务处理能力上实现了显著飞跃,并且首次在稳定的 100 万 token 上下文中提供这一能力。Jinja00
SwanLab⚡️SwanLab - an open-source, modern-design AI training tracking and visualization tool. Supports Cloud / Self-hosted use. Integrated with PyTorch / Transformers / LLaMA Factory / veRL/ Swift / Ultralytics / MMEngine / Keras etc.Python00
tiny-universe《大模型白盒子构建指南》:一个全手搓的Tiny-UniverseJupyter Notebook03
项目优选
收起
deepin linux kernel
C
32
16
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
469
465
暂无描述
Dockerfile
778
5.08 K
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
877
2.03 K
Ascend Extension for PyTorch
Python
758
968
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
697
1.4 K
昇腾LLM分布式训练框架
Python
185
231
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
1.1 K
1.14 K
本仓库是 Flutter SDK 与 Flutter Engine 的 OpenHarmony 适配版本,由 CPF-Flutter 团队维护。开发者可使用熟悉的 Flutter 技术栈开发 OpenHarmony 应用,3.35.7 及以后的适配版本可基于本仓库源码构建支持 OpenHarmony 的 Flutter Engine。
Dart
1.04 K
271
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
2.25 K
677