推荐文章:开启嵌入式设备的深度学习新纪元:MLPerf Tiny
2024-05-21 02:04:11作者:庞眉杨Will
推荐文章:开启嵌入式设备的深度学习新纪元:MLPerf Tiny
1、项目介绍
MLPerf™ Tiny 是一个专为微型设备设计的深度学习基准测试平台,旨在提供一套代表性的深度神经网络模型和配套基准代码,用于比较嵌入式设备间的性能。这些设备涵盖微控制器、数字信号处理器以及小型神经网络加速器,工作频率通常在10MHz到250MHz之间,功耗低于50mW。通过MLPerf Tiny,硬件制造商和研究人员能够为特定应用选择最佳的硬件解决方案,同时也为软硬件供应商提供了展示其产品优势的舞台。
2、项目技术分析
该项目基于TensorFlow Lite for Microcontrollers (TFLM) 提供参考基准,但提交者可根据自身硬件需求选择最适合的软件栈。这一灵活的架构允许开发者充分利用硬件潜力,优化性能。MLPerf Tiny 提供了不断更新的版本,每个版本都经过精心设计和测试,确保了公正性和代表性。
3、项目及技术应用场景
MLPerf Tiny 的应用场景广泛,包括但不限于:
- 物联网(IoT)设备上的实时智能决策
- 边缘计算中的高效数据处理
- 嵌入式安全系统中的目标检测与识别
- 智能穿戴设备的人工智能功能实现
- 低功耗设备的语音和图像识别
4、项目特点
- 全面性:涵盖多种深度学习模型,满足不同应用需求。
- 可比性:统一的基准测试代码,确保跨设备性能评估的公平性。
- 灵活性:支持使用TFLM或自定义软件栈,适应不同硬件环境。
- 持续更新:定期发布新版本,保持与技术发展同步。
- 社区驱动:开放源代码,并设有交流平台,鼓励开发者参与讨论和贡献。
为了获取最新的v1.1版本,以及了解即将到来的提交截止日期和结果公布时间,请关注项目仓库。学术研究中若引用MLPerf Tiny,请引用相关文献,为这个充满活力的社区贡献力量。
加入https://groups.google.com/a/mlcommons.org/g/tiny,与全球开发者一起探索嵌入式设备深度学习的无限可能吧!
注:本文为翻译和概述,原文以英文为主,可在项目GitHub仓库查看。
登录后查看全文
热门项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0215
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0138
uni-appA cross-platform framework using Vue.jsJavaScript08
GLM-5.2智谱开源 GLM-5.2,这是针对长文本任务的最新旗舰模型。相较于前代产品 GLM-5.1,它在长文本任务处理能力上实现了显著飞跃,并且首次在稳定的 100 万 token 上下文中提供这一能力。Jinja00
SwanLab⚡️SwanLab - an open-source, modern-design AI training tracking and visualization tool. Supports Cloud / Self-hosted use. Integrated with PyTorch / Transformers / LLaMA Factory / veRL/ Swift / Ultralytics / MMEngine / Keras etc.Python00
tiny-universe《大模型白盒子构建指南》:一个全手搓的Tiny-UniverseJupyter Notebook03
项目优选
收起
deepin linux kernel
C
32
16
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
471
465
暂无描述
Dockerfile
779
5.08 K
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
876
2.03 K
Ascend Extension for PyTorch
Python
758
968
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
697
1.4 K
昇腾LLM分布式训练框架
Python
185
231
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
1.1 K
1.14 K
本仓库是 Flutter SDK 与 Flutter Engine 的 OpenHarmony 适配版本,由 CPF-Flutter 团队维护。开发者可使用熟悉的 Flutter 技术栈开发 OpenHarmony 应用,3.35.7 及以后的适配版本可基于本仓库源码构建支持 OpenHarmony 的 Flutter Engine。
Dart
1.04 K
271
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
2.25 K
677