BoTorch项目中FixedFeatureAcquisitionFunction维度处理问题分析
问题背景
在BoTorch项目的多保真度优化场景中,当使用FixedFeatureAcquisitionFunction处理固定特征时,发现了一个关键的维度计算错误。这个问题影响了包括qMultiFidelityKnowledgeGradient在内的多个知识梯度类获取函数。
问题本质
在optimize_objective函数中,当处理固定特征时,计算自由特征维度的逻辑存在错误。具体表现为:
- 输入边界张量
bounds的形状应为(2, d),其中d是特征维度数 - 当前代码使用
len(bounds)获取维度数,这会返回2(因为bounds是二维张量) - 正确做法应该是使用
bounds.shape[-1]来获取特征维度数d
这个错误导致后续的维度计算完全错误,最终在FixedFeatureAcquisitionFunction的_construct_X_full方法中抛出维度不匹配的异常。
影响范围
该问题影响所有使用optimize_objective函数的获取函数,包括:
- qKnowledgeGradient
- qHypervolumeKnowledgeGradient
- qMultiFidelityKnowledgeGradient
- qMultiFidelityHypervolumeKnowledgeGradient
技术细节分析
在多保真度优化场景中,通常会有一个或多个维度被指定为"保真度"维度。当使用target_fidelities参数指定目标保真度时,这些维度会被固定,从而触发FixedFeatureAcquisitionFunction的使用。
错误的核心在于维度计算方式。在Python中,对二维张量使用len()函数会返回第一维的大小,而不是特征维度数。例如,对于形状为(2,9)的边界张量:
len(bounds)返回2bounds.shape[-1]返回9(正确的特征维度数)
当有固定特征时,代码试图从[0,1]中减去固定特征的键,而不是从完整的特征索引范围[0,...,d-1]中减去,这显然会导致维度计算错误。
解决方案
正确的实现应该使用张量的shape属性来获取特征维度数。修复后的代码应该如下:
free_feature_dims = list(range(bounds.shape[-1]) - fixed_features.keys()
这样就能正确计算出剩余的自由特征维度。
实际应用中的表现
在实际应用中,这个问题表现为当尝试使用多保真度知识梯度获取函数时,系统会抛出ValueError,提示输入的特征维度与预期不符。例如,在一个有8个位置维度和1个保真度维度的场景中,错误信息会显示:
Feature dimension d' (2) of input must be d - d_f (8).
这表明系统错误地认为输入只有2个维度,而实际上应该有8个自由维度(总维度9减去1个固定保真度维度)。
总结
这个bug虽然看似简单,但影响范围较广,特别是在多保真度优化场景中。它提醒我们在处理张量维度时需要特别注意:
- 明确区分张量的不同维度含义
- 使用shape属性而非len()函数获取特征维度数
- 在涉及固定特征的场景中,确保维度计算逻辑正确
该问题已在最新版本的BoTorch中得到修复,用户在使用多保真度优化功能时可以正常工作了。
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0150- DDeepSeek-V4-ProDeepSeek-V4-Pro(总参数 1.6 万亿,激活 49B)面向复杂推理和高级编程任务,在代码竞赛、数学推理、Agent 工作流等场景表现优异,性能接近国际前沿闭源模型。Python00
LongCat-Video-Avatar-1.5最新开源LongCat-Video-Avatar 1.5 版本,这是一款经过升级的开源框架,专注于音频驱动人物视频生成的极致实证优化与生产级就绪能力。该版本在 LongCat-Video 基础模型之上构建,可生成高度稳定的商用级虚拟人视频,支持音频-文本转视频(AT2V)、音频-文本-图像转视频(ATI2V)以及视频续播等原生任务,并能无缝兼容单流与多流音频输入。00
auto-devAutoDev 是一个 AI 驱动的辅助编程插件。AutoDev 支持一键生成测试、代码、提交信息等,还能够与您的需求管理系统(例如Jira、Trello、Github Issue 等)直接对接。 在IDE 中,您只需简单点击,AutoDev 会根据您的需求自动为您生成代码。Kotlin03
Intern-S2-PreviewIntern-S2-Preview,这是一款高效的350亿参数科学多模态基础模型。除了常规的参数与数据规模扩展外,Intern-S2-Preview探索了任务扩展:通过提升科学任务的难度、多样性与覆盖范围,进一步释放模型能力。Python00
skillhubopenJiuwen 生态的 Skill 托管与分发开源方案,支持自建与可选 ClawHub 兼容。Python0111