TorchGeo中语义分割任务的宏平均与微平均指标解析
在TorchGeo项目的语义分割任务中,评估指标的选择对于模型性能的准确衡量至关重要。本文将深入探讨MulticlassAccuracy和MulticlassJaccardIndex两种评估指标中宏平均(macro)与微平均(micro)的区别及其在遥感影像分析中的实际意义。
评估指标的本质差异
宏平均和微平均是两种不同的聚合统计方法,它们在处理多类别分类问题时表现出显著差异:
-
宏平均(Macro Average):计算每个类别的指标后取算术平均值。这种方法平等对待每个类别,无论类别样本数量多少。在遥感图像分析中,相当于平等对待每个图像块(patch),计算各块的准确率后再取平均。
-
微平均(Micro Average):将所有类别的预测结果汇总后计算整体指标。这种方法考虑了每个样本的贡献,相当于在像素级别进行统计,计算所有像素的整体准确率。
遥感图像分析中的特殊考量
在TorchGeo处理的地理空间数据中,图像块(patch)之间往往存在显著差异:
- 某些图像块可能包含大量无效数据(如nodata像素)
- 不同图像块的有效数据比例可能差异很大
- 地理空间数据通常存在类别不平衡问题
这种情况下,宏平均可能会产生误导性结果。例如,一个几乎全是无效数据的图像块和一个充满有效数据的图像块,宏平均会给予它们相同的权重,而微平均则会根据实际有效像素数量进行加权。
TorchGeo的默认选择
TorchGeo的SemanticSegmentationTask中,MulticlassAccuracy和MulticlassJaccardIndex默认采用"micro"平均方式,这与torchmetrics库的默认"macro"设置不同。这一选择基于地理空间数据的特性:
- 微平均更关注像素级别的整体性能
- 能更好地反映模型在实际地理空间分析中的表现
- 避免了图像块间数据分布不均带来的偏差
实际应用建议
对于TorchGeo用户,在选择评估指标时应考虑:
- 数据特性:如果数据集经过预处理(如预切割),且各图像块数据分布均匀,宏平均可能适用
- 分析目标:关注整体像素准确率选择微平均,关注各区域平均表现选择宏平均
- 结果解释:建议同时计算两种指标以获得更全面的性能评估
未来TorchGeo可能会引入更明确的指标命名,如"整体准确率(OA)"对应微平均,"平均准确率(AA)"对应宏平均,以增强结果的可解释性。
理解这些指标差异有助于研究人员更准确地评估模型在地理空间分析任务中的真实性能,避免因指标选择不当导致的错误结论。
AutoGLM-Phone-9BAutoGLM-Phone-9B是基于AutoGLM构建的移动智能助手框架,依托多模态感知理解手机屏幕并执行自动化操作。Jinja00
Kimi-K2-ThinkingKimi K2 Thinking 是最新、性能最强的开源思维模型。从 Kimi K2 开始,我们将其打造为能够逐步推理并动态调用工具的思维智能体。通过显著提升多步推理深度,并在 200–300 次连续调用中保持稳定的工具使用能力,它在 Humanity's Last Exam (HLE)、BrowseComp 等基准测试中树立了新的技术标杆。同时,K2 Thinking 是原生 INT4 量化模型,具备 256k 上下文窗口,实现了推理延迟和 GPU 内存占用的无损降低。Python00
GLM-4.6V-FP8GLM-4.6V-FP8是GLM-V系列开源模型,支持128K上下文窗口,融合原生多模态函数调用能力,实现从视觉感知到执行的闭环。具备文档理解、图文生成、前端重构等功能,适用于云集群与本地部署,在同类参数规模中视觉理解性能领先。Jinja00
HunyuanOCRHunyuanOCR 是基于混元原生多模态架构打造的领先端到端 OCR 专家级视觉语言模型。它采用仅 10 亿参数的轻量化设计,在业界多项基准测试中取得了当前最佳性能。该模型不仅精通复杂多语言文档解析,还在文本检测与识别、开放域信息抽取、视频字幕提取及图片翻译等实际应用场景中表现卓越。00
GLM-ASR-Nano-2512GLM-ASR-Nano-2512 是一款稳健的开源语音识别模型,参数规模为 15 亿。该模型专为应对真实场景的复杂性而设计,在保持紧凑体量的同时,多项基准测试表现优于 OpenAI Whisper V3。Python00
GLM-TTSGLM-TTS 是一款基于大语言模型的高质量文本转语音(TTS)合成系统,支持零样本语音克隆和流式推理。该系统采用两阶段架构,结合了用于语音 token 生成的大语言模型(LLM)和用于波形合成的流匹配(Flow Matching)模型。 通过引入多奖励强化学习框架,GLM-TTS 显著提升了合成语音的表现力,相比传统 TTS 系统实现了更自然的情感控制。Python00
Spark-Formalizer-X1-7BSpark-Formalizer 是由科大讯飞团队开发的专用大型语言模型,专注于数学自动形式化任务。该模型擅长将自然语言数学问题转化为精确的 Lean4 形式化语句,在形式化语句生成方面达到了业界领先水平。Python00