Searchkit中实现类似Algolia的distinct功能

在从Algolia迁移到Elasticsearch并使用Searchkit时，开发者经常会遇到如何实现类似Algolia中distinct功能的问题。本文将深入探讨这一需求的解决方案。

业务场景分析

在电商平台特别是多商户市场环境中，经常会出现这样的情况：多个商户销售完全相同的商品（相同的SKU、价格等所有属性）。在搜索结果展示时，我们通常希望只显示每个商品的一个代表性结果，而不是重复显示所有商户的相同商品。

Algolia通过attributeForDistinct参数实现了这一功能，可以基于指定属性（如SKU）对结果进行去重。那么在Searchkit和Elasticsearch生态中，如何实现相同的效果呢？

Elasticsearch的解决方案

Elasticsearch提供了字段折叠（Field Collapsing）功能，这正好可以满足我们的需求。字段折叠允许我们基于某个字段对搜索结果进行分组，每组只返回最匹配的文档。

实现步骤

1. 配置字段折叠参数：在Searchkit的beforeSearch钩子中添加字段折叠参数
2. 结果转换处理：在afterSearch钩子中对折叠后的结果进行转换，使其符合Searchkit预期的数据结构

技术实现细节

在Searchkit配置中，我们可以这样实现：

const searchkitConfig = {
  // 其他配置...
  hooks: {
    beforeSearch: (searchRequest) => {
      // 添加字段折叠参数
      searchRequest.body.collapse = {
        field: "sku.keyword" // 假设sku字段是我们想要去重的字段
      };
      return searchRequest;
    },
    afterSearch: (searchResponse) => {
      // 处理折叠后的结果
      const hits = searchResponse.hits.hits.map(hit => {
        return {
          ...hit,
          // 可能需要根据实际需求调整数据结构
        };
      });
      return {
        ...searchResponse,
        hits: {
          ...searchResponse.hits,
          hits
        }
      };
    }
  }
};

注意事项

1. 性能考量：字段折叠操作会增加查询的计算成本，特别是在大数据集上
2. 排序策略：折叠后的每组文档默认返回最匹配的文档，可以通过inner_hits参数控制返回策略
3. 字段类型：确保用于折叠的字段是keyword类型或设置了fielddata=true

替代方案比较

除了字段折叠，Elasticsearch还提供了其他可能的相关功能：

1. Terms聚合：可以实现分组，但不适合主搜索结果
2. Top Hits聚合：结合Terms聚合可以实现类似效果，但复杂度较高

相比之下，字段折叠是最直接和高效的解决方案，特别适合这种搜索结果去重的场景。

结论

通过Elasticsearch的字段折叠功能，我们可以完美实现类似Algolia的distinct效果。Searchkit提供的钩子机制让我们能够灵活地定制搜索请求和结果处理，满足各种业务需求。对于多商户电商平台的搜索结果优化，这是一个既高效又可靠的解决方案。