Shiki项目JS语法高亮引擎的技术演进与未来展望
2025-05-20 01:48:56作者:姚月梅Lane
Shiki作为一款优秀的代码语法高亮工具,其核心引擎技术正在经历重要变革。项目团队近期针对JavaScript引擎的成熟度进行了深入讨论,展现了从实验性功能到稳定组件的技术演进过程。
JS引擎的技术突破
Shiki的JS引擎基于oniguruma-to-es库实现,目前已能支持95%的语法规则,其中正则表达式兼容性达到99.9%。技术团队通过持续优化,解决了包括Markdown、PO等语法在内的兼容性问题。对于Ada和Hack等语言的支持也即将完成,仅需等待上游仓库对特定正则表达式的修正。
特别值得注意的是,团队发现并正在处理Apex语言中一个复杂的子程序边缘案例。这类Oniguruma子程序的模拟在JavaScript环境下极具挑战性,但技术团队对此保持乐观态度。
性能与兼容性的平衡
JS引擎相比WASM引擎具有显著优势:
- 体积仅为WASM引擎的4%
- 无需WASM运行时环境
- 更快的初始化速度
尽管目前仍有约3%的语法规则存在兼容性问题,但技术团队认为通过调整语法规则中的特定模式(如避免递归重叠等特性),可以进一步提升兼容性。这种方案比继续扩展底层库的模拟能力更具可行性。
架构演进方向
项目维护者提出了重要的架构规划:
- 解除与Oniguruma的强耦合关系
- 在下一个主要版本中实现引擎的可组合/可交换性
- 考虑移除难以支持的语法或替换为兼容性更好的实现
这些变革将使Shiki更加灵活和轻量,同时保持高质量的语法高亮能力。
开发者工具生态展望
为提升语法开发体验,团队计划构建更完善的工具链:
- 提供语法开发模板
- 开发交互式调试工具
- 实现状态机和令牌可视化
- 增加Oniguruma特性兼容性检查
这些工具将帮助语法作者创建更兼容、性能更好的语法定义,同时降低Shiki各引擎间的差异问题。
总结
Shiki项目通过JS引擎的持续优化,正在向更轻量、更灵活的技术架构演进。虽然完全替代WASM引擎仍需时日,但已展现出令人瞩目的技术成熟度。未来随着工具链的完善和架构的解耦,Shiki有望成为语法高亮领域更加强大和易用的解决方案。
登录后查看全文
热门项目推荐
相关项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0214
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0138
uni-appA cross-platform framework using Vue.jsJavaScript08
GLM-5.2智谱开源 GLM-5.2,这是针对长文本任务的最新旗舰模型。相较于前代产品 GLM-5.1,它在长文本任务处理能力上实现了显著飞跃,并且首次在稳定的 100 万 token 上下文中提供这一能力。Jinja00
SwanLab⚡️SwanLab - an open-source, modern-design AI training tracking and visualization tool. Supports Cloud / Self-hosted use. Integrated with PyTorch / Transformers / LLaMA Factory / veRL/ Swift / Ultralytics / MMEngine / Keras etc.Python00
tiny-universe《大模型白盒子构建指南》:一个全手搓的Tiny-UniverseJupyter Notebook03
项目优选
收起
deepin linux kernel
C
32
16
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
469
465
暂无描述
Dockerfile
778
5.08 K
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
877
2.03 K
Ascend Extension for PyTorch
Python
758
968
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
697
1.4 K
昇腾LLM分布式训练框架
Python
185
231
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
1.1 K
1.14 K
本仓库是 Flutter SDK 与 Flutter Engine 的 OpenHarmony 适配版本,由 CPF-Flutter 团队维护。开发者可使用熟悉的 Flutter 技术栈开发 OpenHarmony 应用,3.35.7 及以后的适配版本可基于本仓库源码构建支持 OpenHarmony 的 Flutter Engine。
Dart
1.04 K
271
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
2.25 K
677