首页
/ One API 项目新增自定义渠道支持以兼容自部署模型

One API 项目新增自定义渠道支持以兼容自部署模型

2025-07-06 11:38:09作者:邓越浪Henry

在开源API管理项目One API的最新更新中,开发团队针对模型价格管理功能进行了重要优化。这项改进主要解决了用户在管理自部署模型和小众厂商模型时遇到的分类难题。

背景与问题

One API作为一个集中管理多种AI模型API的平台,原先在创建模型价格时要求用户必须将模型归类到预设的供应商列表中。这种设计虽然对主流云服务商(如OpenAI、Anthropic等)很友好,但却给使用自部署模型或小众厂商模型的用户带来了不便。

在实际使用场景中,许多企业和开发者会选择:

  1. 自行部署开源模型
  2. 使用非主流厂商提供的专用模型
  3. 通过非标准接口接入的模型服务

这些模型往往无法准确对应到平台预设的供应商分类中,导致用户不得不将模型强行归类到不匹配的供应商下,影响了管理的准确性和使用体验。

解决方案

最新版本中,开发团队引入了"自定义渠道"选项,作为模型价格创建时的供应商选择之一。这一改进带来了以下优势:

  1. 分类灵活性:用户现在可以将自部署或小众模型明确标记为自定义渠道,不再需要勉强归类
  2. 管理清晰度:自定义渠道模型与其他主流供应商模型区分显示,便于识别和管理
  3. 兼容性保障:确保所有类型的模型都能在系统中得到恰当表示,不影响计费和路由功能

技术实现要点

在技术实现层面,这一改进主要涉及:

  1. 扩展供应商枚举类型,增加CUSTOM选项
  2. 修改前端表单验证逻辑,允许自定义渠道选择
  3. 调整价格显示逻辑,确保自定义渠道模型能正确展示
  4. 保持与现有API的向后兼容性

使用建议

对于不同类型的模型,建议采用以下管理策略:

  1. 自托管模型:使用自定义渠道,在模型名称中注明部署方式(如"Llama2-自托管")
  2. 小众商业模型:同样使用自定义渠道,可在描述中补充厂商信息
  3. 主流云服务:继续使用预设供应商分类

这一改进显著提升了One API对不同类型AI模型的包容性,使平台能够更好地服务于多样化的模型使用场景,特别是那些依赖自建模型基础设施的企业用户。

登录后查看全文
热门项目推荐
相关项目推荐

项目优选

收起
docsdocs
暂无描述
Markdown
827
5.48 K
kernelkernel
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
494
515
ops-nnops-nn
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
783
1.57 K
pytorchpytorch
作为 Ascend for PyTorch 社区的核心组件,TorchNPU 是昇腾专为 PyTorch 打造的深度学习适配插件,使 PyTorch 框架能够直接调用昇腾 NPU,为开发者提供昇腾 AI 处理器的超强算力。
Python
800
1.14 K
ops-transformerops-transformer
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
970
2.28 K
kernelkernel
deepin linux kernel
C
32
16
AscendNPU-IRAscendNPU-IR
AscendNPU-IR是基于MLIR(Multi-Level Intermediate Representation)构建的,面向昇腾亲和算子编译时使用的中间表示,提供昇腾完备表达能力,通过编译优化提升昇腾AI处理器计算效率,支持通过生态框架使能昇腾AI处理器与深度调优
C++
480
312
jiuwenswarmjiuwenswarm
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
3.01 K
766
cannbot-skillscannbot-skills
CANNBot 是面向 CANN 开发的用于提升开发效率的系列智能体,本仓库为其提供可复用的 Skills 模块。
Markdown
1.26 K
808
cann-learning-hubcann-learning-hub
CANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。
Jupyter Notebook
647
284