Supervision项目中的Transformers结果转换方法更新解析
在计算机视觉领域,Hugging Face的Transformers库因其强大的预训练模型而广受欢迎。作为配套工具,Supervision项目提供了将Transformers模型输出转换为标准化检测结果的功能。本文将深入解析Supervision项目中from_transformers方法的更新背景和技术实现。
背景与挑战
Supervision库中的from_transformers方法负责将Hugging Face Transformers的输出转换为统一的Detections对象。在Transformers v4版本中,用户需要根据任务类型调用不同的后处理方法:
post_process_segmentation用于分割任务post_process用于检测任务
然而,随着Transformers库的发展,这些方法已被标记为弃用,并将在v5版本中移除。这对依赖这些方法的Supervision库提出了兼容性挑战。
新旧方法对比
Transformers v5引入了全新的后处理方法体系:
| 旧方法(v4) | 新方法(v5) | 功能描述 |
|---|---|---|
| post_process | post_process_object_detection | 目标检测任务处理 |
| post_process_panoptic | post_process_panoptic_segmentation | 全景分割任务处理 |
| post_process_segmentation | post_process_semantic_segmentation | 语义分割任务处理 |
| post_process_instance | post_process_instance_segmentation | 实例分割任务处理 |
技术实现要点
Supervision库的更新需要解决几个关键技术点:
- 兼容性处理:需要同时支持新旧版本的方法调用,确保平滑过渡
- 类型转换:不同任务类型的输出格式差异需要统一处理
- 数据封装:将转换结果封装为通用的
Detections对象
Detections对象的设计具有很好的扩展性,其data属性可以存储模型输出的附加信息,如额外的类别数据等。这种设计为方法更新提供了灵活性。
实现策略
更新后的from_transformers方法采用了智能判断策略:
- 输入检查:自动识别输入数据的来源方法
- 格式转换:根据输入类型执行相应的格式转换
- 对象构建:最终构建统一的
Detections对象
特别值得注意的是,全景分割任务(post_process_panoptic)的输出包含PNG字符串和segments_info,这在原有版本中就不支持,需要在更新中特别处理。
总结
Supervision项目对from_transformers方法的更新,不仅解决了与Transformers新版本的兼容性问题,还进一步强化了其作为计算机视觉工具链中重要一环的地位。通过统一的Detections对象接口,开发者可以更方便地在不同版本的Transformers模型间切换,同时保持下游处理逻辑的一致性。
这种更新体现了优秀开源项目的设计理念:在保持核心接口稳定的同时,积极适应生态系统的变化,为开发者提供持久可靠的工具支持。
GLM-5智谱 AI 正式发布 GLM-5,旨在应对复杂系统工程和长时域智能体任务。Jinja00
GLM-5.1GLM-5.1是智谱迄今最智能的旗舰模型,也是目前全球最强的开源模型。GLM-5.1大大提高了代码能力,在完成长程任务方面提升尤为显著。和此前分钟级交互的模型不同,它能够在一次任务中独立、持续工作超过8小时,期间自主规划、执行、自我进化,最终交付完整的工程级成果。Jinja00
MiniMax-M2.7MiniMax-M2.7 是我们首个深度参与自身进化过程的模型。M2.7 具备构建复杂智能体应用框架的能力,能够借助智能体团队、复杂技能以及动态工具搜索,完成高度精细的生产力任务。Python00- QQwen3.5-397B-A17BQwen3.5 实现了重大飞跃,整合了多模态学习、架构效率、强化学习规模以及全球可访问性等方面的突破性进展,旨在为开发者和企业赋予前所未有的能力与效率。Jinja00
HY-Embodied-0.5这是一套专为现实世界具身智能打造的基础模型。该系列模型采用创新的混合Transformer(Mixture-of-Transformers, MoT) 架构,通过潜在令牌实现模态特异性计算,显著提升了细粒度感知能力。Jinja00
LongCat-AudioDiT-1BLongCat-AudioDiT 是一款基于扩散模型的文本转语音(TTS)模型,代表了当前该领域的最高水平(SOTA),它直接在波形潜空间中进行操作。00