推荐:构建可信的多视图分类模型 —— Trusted Multi-View Classification
2024-05-29 17:39:19作者:邓越浪Henry
在这个数字化时代,数据通常以多模态或多视图的形式存在,如何高效、可靠地利用这些数据进行分类是人工智能领域的重要挑战。为此,我们向您推荐一个创新性的开源项目——Trusted Multi-View Classification。这个项目不仅在ICLR'2021和IEEE TPAMI'2022上发表,还提供了完整的代码库,使研究人员和开发者能够轻松实现对多模态数据的可信融合和分类。
1、项目介绍
Trusted Multi-View Classification 是一种用于构建可信多模态分类模型的方法。它通过引入证据理论和概率分布来量化和结合不同数据来源的不确定性,从而提供更为可靠的分类结果。此外,该方法还适用于Ensemble Learning和Multi-View Learning等场景。
2、项目技术分析
项目的核心在于将传统的神经网络输出转化为非负值的证据,并利用Dirichlet分布进行表示。然后,通过动态证据融合,结合Dempster-Shafer理论,实现不同视图之间不确定性与信念度的融合。这种方法避免了传统单一的融合策略,提高了分类的准确性和可信度。
3、应用场景
- 医疗图像识别:在医疗影像分析中,多模态数据(如CT扫描、MRI)的融合可以提高疾病诊断的准确性。
- 自动驾驶:车辆感知系统可能从多种传感器获取信息,此方法可帮助更准确地识别道路状况。
- 多媒体内容理解:图像、文本和音频的多模态信息融合,提升社交媒体和视频内容的理解和检索。
4、项目特点
- 可信度增强:通过量化和融合各视图的不确定性和信任度,提高了整体分类的可靠性。
- 灵活性高:支持不同的神经网络结构和多模态数据集,易于集成到现有系统。
- 易用性:提供的详细示例和文档,使得快速上手和二次开发变得简单。
- 持续更新:作者团队将持续优化和完善代码库,确保最新研究成果的及时呈现。
如果您正在寻找一种强大且灵活的方式来处理多模态数据的分类问题,Trusted Multi-View Classification无疑是值得尝试的选择。立即加入并体验这个项目的魅力,让您的分类任务更加精准和可信!
为了表达对原作者的尊重,请在使用该项目时引用以下论文:
@inproceedings{
han2021trusted,
title={Trusted Multi-View Classification},
author={Zongbo Han and Changqing Zhang and Huazhu Fu and Joey Tianyi Zhou},
booktitle={International Conference on Learning Representations},
year={2021},
url={https://openreview.net/forum?id=OOsR8BzCnl5}
}
@article{han2022trusted,
title={Trusted Multi-View Classification with Dynamic Evidential Fusion},
author={Han, Zongbo and Zhang, Changqing and Fu, Huazhu and Zhou, Joey Tianyi},
journal={IEEE Transactions on Pattern Analysis and Machine Intelligence},
year={2022},
publisher={IEEE}
}
有任何问题,可以通过邮件联系zongbo AT tju DOT edu DOT cn,期待您的参与和贡献!
登录后查看全文
热门项目推荐
AutoGLM-Phone-9BAutoGLM-Phone-9B是基于AutoGLM构建的移动智能助手框架,依托多模态感知理解手机屏幕并执行自动化操作。Jinja00
Kimi-K2-ThinkingKimi K2 Thinking 是最新、性能最强的开源思维模型。从 Kimi K2 开始,我们将其打造为能够逐步推理并动态调用工具的思维智能体。通过显著提升多步推理深度,并在 200–300 次连续调用中保持稳定的工具使用能力,它在 Humanity's Last Exam (HLE)、BrowseComp 等基准测试中树立了新的技术标杆。同时,K2 Thinking 是原生 INT4 量化模型,具备 256k 上下文窗口,实现了推理延迟和 GPU 内存占用的无损降低。Python00
GLM-4.6V-FP8GLM-4.6V-FP8是GLM-V系列开源模型,支持128K上下文窗口,融合原生多模态函数调用能力,实现从视觉感知到执行的闭环。具备文档理解、图文生成、前端重构等功能,适用于云集群与本地部署,在同类参数规模中视觉理解性能领先。Jinja00
HunyuanOCRHunyuanOCR 是基于混元原生多模态架构打造的领先端到端 OCR 专家级视觉语言模型。它采用仅 10 亿参数的轻量化设计,在业界多项基准测试中取得了当前最佳性能。该模型不仅精通复杂多语言文档解析,还在文本检测与识别、开放域信息抽取、视频字幕提取及图片翻译等实际应用场景中表现卓越。00
GLM-ASR-Nano-2512GLM-ASR-Nano-2512 是一款稳健的开源语音识别模型,参数规模为 15 亿。该模型专为应对真实场景的复杂性而设计,在保持紧凑体量的同时,多项基准测试表现优于 OpenAI Whisper V3。Python00
GLM-TTSGLM-TTS 是一款基于大语言模型的高质量文本转语音(TTS)合成系统,支持零样本语音克隆和流式推理。该系统采用两阶段架构,结合了用于语音 token 生成的大语言模型(LLM)和用于波形合成的流匹配(Flow Matching)模型。 通过引入多奖励强化学习框架,GLM-TTS 显著提升了合成语音的表现力,相比传统 TTS 系统实现了更自然的情感控制。Python00
Spark-Formalizer-X1-7BSpark-Formalizer 是由科大讯飞团队开发的专用大型语言模型,专注于数学自动形式化任务。该模型擅长将自然语言数学问题转化为精确的 Lean4 形式化语句,在形式化语句生成方面达到了业界领先水平。Python00
项目优选
收起
deepin linux kernel
C
25
9
OpenHarmony documentation | OpenHarmony开发者文档
Dockerfile
415
3.19 K
Nop Platform 2.0是基于可逆计算理论实现的采用面向语言编程范式的新一代低代码开发平台,包含基于全新原理从零开始研发的GraphQL引擎、ORM引擎、工作流引擎、报表引擎、规则引擎、批处理引引擎等完整设计。nop-entropy是它的后端部分,采用java语言实现,可选择集成Spring框架或者Quarkus框架。中小企业可以免费商用
Java
9
1
暂无简介
Dart
680
160
🔥LeetCode solutions in any programming language | 多种编程语言实现 LeetCode、《剑指 Offer(第 2 版)》、《程序员面试金典(第 6 版)》题解
Java
65
19
Ascend Extension for PyTorch
Python
229
259
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
689
327
React Native鸿蒙化仓库
JavaScript
265
326
喝着茶写代码!最易用的自托管一站式代码托管平台,包含Git托管,代码审查,团队协作,软件包和CI/CD。
Go
23
0
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
1.21 K
661