首页
/ Orama 数据库新增字段投影功能优化搜索性能

Orama 数据库新增字段投影功能优化搜索性能

2025-05-25 11:10:04作者:滕妙奇

背景介绍

Orama 是一个高性能的全文搜索引擎库,最近社区提出了一个关于优化搜索返回结果的建议。在服务器端使用 Orama 时,开发者希望能够控制返回文档中包含的字段,以减少不必要的数据传输,提高系统效率。

问题分析

在现有版本中,Orama 的搜索功能会返回匹配文档的所有字段。当文档结构复杂或包含大量数据时,这会导致以下问题:

  1. 网络传输数据量过大
  2. 客户端处理不必要的数据
  3. 服务器资源浪费在序列化不需要的字段上

解决方案设计

Orama 团队采纳了类似 MongoDB 投影操作的设计思路,提出了两种实现方案:

方案一:包含式投影

通过 returning 参数指定需要返回的字段列表,只有明确列出的字段会被包含在结果中:

const result = await search(db, {
  term: 'headphones',
  returning: ['name', 'description']
});

方案二:排除式投影

通过 projection 参数指定需要排除的字段,其余字段都会被返回:

const result = await search(db, {
  term: 'headphones',
  projection: { meta: 0 }
});

技术实现考量

经过讨论,团队决定优先实现包含式投影方案(returning 参数),主要基于以下考虑:

  1. 性能影响:从对象中移除属性是相对昂贵的操作,在服务器端执行可以显著减少网络传输数据量,这种开销是值得的
  2. 使用场景:客户端通常需要完整数据,而服务器间通信更关注效率
  3. API 简洁性:单一明确的包含列表更易于理解和维护

最佳实践建议

  1. 服务器端优先:建议仅在服务器端使用字段投影功能,客户端应获取完整数据
  2. 文档说明:需要明确标注该功能可能带来的性能影响和使用场景
  3. 渐进式增强:未来可考虑添加排除式投影作为高级功能

总结

Orama 新增的字段投影功能为开发者提供了更精细的搜索结果控制能力,特别适合服务器端的高效数据交互场景。这一改进体现了 Orama 团队对性能优化和开发者体验的持续关注,同时也保持了 API 设计的简洁性和一致性。

登录后查看全文
热门项目推荐

项目优选

收起
docsdocs
暂无描述
Markdown
827
5.48 K
kernelkernel
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
494
515
ops-nnops-nn
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
783
1.57 K
pytorchpytorch
作为 Ascend for PyTorch 社区的核心组件,TorchNPU 是昇腾专为 PyTorch 打造的深度学习适配插件,使 PyTorch 框架能够直接调用昇腾 NPU,为开发者提供昇腾 AI 处理器的超强算力。
Python
800
1.14 K
ops-transformerops-transformer
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
970
2.28 K
kernelkernel
deepin linux kernel
C
32
16
AscendNPU-IRAscendNPU-IR
AscendNPU-IR是基于MLIR(Multi-Level Intermediate Representation)构建的,面向昇腾亲和算子编译时使用的中间表示,提供昇腾完备表达能力,通过编译优化提升昇腾AI处理器计算效率,支持通过生态框架使能昇腾AI处理器与深度调优
C++
480
312
jiuwenswarmjiuwenswarm
JiuwenSwarm 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。
Python
3.01 K
766
cannbot-skillscannbot-skills
CANNBot 是面向 CANN 开发的用于提升开发效率的系列智能体,本仓库为其提供可复用的 Skills 模块。
Markdown
1.26 K
808
cann-learning-hubcann-learning-hub
CANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。
Jupyter Notebook
647
284