Chumsky 0.10发布：解析器组合库的重大革新

Chumsky是一个用Rust编写的解析器组合库，它提供了一种声明式的方式来构建复杂的解析器。解析器组合库允许开发者通过组合小型、简单的解析器来构建复杂的解析器，这种方式比传统的解析器生成器（如Yacc或ANTLR）更加灵活和易于使用。Chumsky特别注重错误处理和错误恢复能力，这使得它非常适合构建编程语言解析器和其他需要高质量错误报告的应用程序。

从零开始的重写

Chumsky 0.10.0版本是一个从零开始的重写版本，基于多年来在1.0.0 alpha版本中的开发工作。这个版本的发布解决了几个关键问题：

1. 文档同步问题：之前稳定版(0.9.x)与推荐使用的1.0.0 alpha版之间存在差异，导致用户混淆
2. 开发周期长：1.0.0开发时间较长，用户需要一个稳定的中间版本
3. API稳定性：虽然1.0.0尚未完成，但0.10.0已经接近最终形态，API不太可能再有重大变化

主要新特性

零拷贝解析

0.10.0版本引入了零拷贝解析能力，这意味着解析器输出可以持有对输入数据的引用，而不需要复制数据。这对于处理大型输入或需要高性能的场景特别有用。

嵌套输入解析

新版本支持解析嵌套结构，如标记树(token trees)。这使得Chumsky能够更好地处理像Rust宏这样的复杂语法结构。

上下文敏感语法支持

Chumsky现在能够处理上下文敏感的语法，包括：

• Python风格的缩进
• Rust风格的原始字符串
• 其他需要上下文信息的语法结构

多种输入类型支持

解析器现在支持更广泛的输入类型：

• 切片和字符串
• 数组
• 实现了Read trait的读取器
• 迭代器
• 支持按Unicode码点或字素(grapheme)解析

性能优化

内部架构的重写带来了显著的性能提升，使得Chumsky在解析复杂语法时更加高效。

解析器组合新范式

IterParser trait

新引入的IterParser trait允许表达生成多个输出的解析器。这使得处理重复结构或可选结构更加直观。

收集到容器

现在可以将可迭代解析器的结果收集到各种容器中，包括固定大小的数组和其他集合类型。

共享状态

解析过程中可以操作共享状态，这为以下场景提供了优雅的解决方案：

• 使用区域分配器(arena allocators)
• 构建CST(具体语法树)
• 字符串驻留(interners)
• 其他需要共享状态的场景

高级功能

实验性记忆化

记忆化(memoization)支持使得Chumsky能够：

• 解析左递归文法
• 降低某些文法的计算复杂度
• 提高解析效率

扩展API

新的扩展API允许第三方库扩展Chumsky的功能，添加新的组合器或定制行为。

专用组合器

新增了几个专用组合器：

• pratt：方便地创建具有精确运算符优先级的表达式解析器
• regex：基于正则表达式模式解析术语

字符处理改进

现在明确区分了ASCII和Unicode文本解析器，使得在处理不同编码的文本时更加精确和高效。

向后兼容性考虑

虽然0.10.0带来了许多改进，但也移除了一些旧特性：

• Parser::then_with方法已被移除，取而代之的是新的上下文敏感组合器

使用建议

对于新项目，建议直接使用0.10.0版本。虽然文档可能尚未完全更新，但核心API已经相当稳定。对于现有项目，需要考虑迁移成本，但长期来看升级是值得的。

Chumsky 0.10.0代表了解析器组合库领域的一次重大进步，为Rust生态系统提供了一个强大、灵活且高效的解析解决方案。它的新特性和改进使得处理复杂语法变得更加简单，同时保持了出色的错误处理能力。