MicroPython项目中libffi库版本升级的技术分析
2025-05-11 14:11:38作者:何举烈Damon
背景介绍
MicroPython作为一款轻量级的Python实现,其Unix端口在支持不同架构时需要依赖libffi库来实现外部函数接口(FFI)功能。近期在尝试为RISC-V 64位架构添加CI支持时,发现当前使用的libffi 3.2.1版本已无法满足需求,因为RISC-V支持是在libffi 3.3版本中才引入的。
技术挑战
在Unix端口下,MicroPython通过libffi实现与本地C代码的交互。当前项目中的libffi子模块指向3.2.1版本,这导致在为RISC-V 64位架构进行交叉编译时遇到兼容性问题。更具体地说:
- RISC-V架构支持是在libffi 3.3版本才加入的
- 当前MicroPython的libffi实现包含自定义的ffi_closure_alloc和ffi_closure_free函数
- 这些自定义函数与较新版本libffi中的实现产生了符号冲突
解决方案演进
临时解决方案
最初考虑在CI环境中直接安装riscv64架构的libffi-dev包,这种方法可以绕过子模块版本限制,快速实现RISC-V 64位架构的CI支持。这种方法利用了Ubuntu/Debian的多架构支持特性,通过配置apt来安装riscv64架构的开发包。
长期解决方案
经过深入分析,决定将libffi子模块升级到3.4.6版本。这一升级涉及以下关键技术点:
- 移除MicroPython中自定义的ffi_closure_alloc和ffi_closure_free实现
- 改进回调对象的内存管理机制
- 使用m_tracked_calloc()来分配mp_obj_fficallback_t对象
内存管理优化
在升级过程中,特别关注了FFI回调对象的内存管理问题。原有的实现通过alloc.c中的mmap_region_head链表来跟踪内存分配,这种方法虽然有效但存在计算资源浪费的问题。新的实现方案:
- 直接使用libffi提供的ffi_closure_alloc和ffi_closure_free
- 使用m_tracked_calloc()确保回调对象被正确追踪
- 解决了回调对象生命周期管理的问题
兼容性考虑
升级过程中验证了不同架构的兼容性:
- ARM架构在GCC 11下会出现符号冲突
- MIPS架构在GCC 10下工作正常
- RISC-V 64位架构在libffi 3.4.6下完全支持
结论
MicroPython项目通过将libffi升级到3.4.6版本,不仅解决了RISC-V 64位架构的支持问题,还优化了FFI回调的内存管理机制。这一改进为项目带来了更好的架构兼容性和更高效的内存使用方式,为未来支持更多新兴架构奠定了基础。
登录后查看全文
热门项目推荐
相关项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0214
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0138
uni-appA cross-platform framework using Vue.jsJavaScript08
GLM-5.2智谱开源 GLM-5.2,这是针对长文本任务的最新旗舰模型。相较于前代产品 GLM-5.1,它在长文本任务处理能力上实现了显著飞跃,并且首次在稳定的 100 万 token 上下文中提供这一能力。Jinja00
SwanLab⚡️SwanLab - an open-source, modern-design AI training tracking and visualization tool. Supports Cloud / Self-hosted use. Integrated with PyTorch / Transformers / LLaMA Factory / veRL/ Swift / Ultralytics / MMEngine / Keras etc.Python00
tiny-universe《大模型白盒子构建指南》:一个全手搓的Tiny-UniverseJupyter Notebook03
项目优选
收起
deepin linux kernel
C
32
16
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
469
465
暂无描述
Dockerfile
778
5.08 K
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
877
2.03 K
Ascend Extension for PyTorch
Python
758
968
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
697
1.4 K
昇腾LLM分布式训练框架
Python
185
231
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
1.1 K
1.14 K
本仓库是 Flutter SDK 与 Flutter Engine 的 OpenHarmony 适配版本,由 CPF-Flutter 团队维护。开发者可使用熟悉的 Flutter 技术栈开发 OpenHarmony 应用,3.35.7 及以后的适配版本可基于本仓库源码构建支持 OpenHarmony 的 Flutter Engine。
Dart
1.04 K
271
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
2.25 K
677