OpenManus项目中实现Bing搜索替代Google搜索的技术方案

在OpenManus项目中，开发者们经常需要集成搜索引擎功能来增强AI代理的信息获取能力。本文将详细介绍如何在OpenManus项目中实现Bing搜索功能来替代默认的Google搜索，以及相关的技术实现细节和优化方案。

背景与需求

OpenManus作为一个开源AI代理框架，默认集成了Google搜索功能。然而，由于网络环境限制或特定需求，开发者可能需要使用Bing搜索作为替代方案。本文提供的技术方案通过创建BingSearch工具类，实现了与项目架构的无缝集成。

核心实现方案

1. BingSearch工具类实现

在app/tool/目录下创建bing_search.py文件，核心实现如下：

import asyncio
from typing import List
from urllib.parse import quote
import requests
from bs4 import BeautifulSoup
from app.tool.base import BaseTool

class BingSearch(BaseTool):
    name: str = "bing_search"
    description: str = """执行必应搜索并返回相关链接列表。..."""
    
    # 参数定义
    parameters: dict = {...}
    
    async def execute(self, query: str, num_results: int = 10) -> List[str]:
        def sync_search():
            headers = {
                'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36',
                'Accept-Language': 'en-US,en;q=0.9'
            }
            url = f'https://www.bing.com/search?q={quote(query)}'
            links = []
            
            # 分页获取结果
            for page in range(0, num_results // 10 + 1):
                resp = requests.get(
                    f'{url}&first={page * 10}',
                    headers=headers,
                    timeout=10
                )
                soup = BeautifulSoup(resp.text, 'html.parser')
                
                # 解析结果
                for result in soup.select('.b_algo'):
                    link = result.find('a', href=True)
                    if link and 'href' in link.attrs:
                        links.append(link['href'])
                        if len(links) >= num_results:
                            return links
            return links[:num_results]

        loop = asyncio.get_event_loop()
        return await loop.run_in_executor(None, sync_search)

2. 项目集成步骤

1. 工具注册：在agent/manus.py中导入并添加BingSearch工具
2. 提示词更新：修改prompt/manus.py中的相关提示词，将GoogleSearch替换为BingSearch
3. 全局替换：项目内搜索所有GoogleSearch引用并替换为BingSearch

技术细节解析

1. 异步处理机制：

   • 使用asyncio.run_in_executor将同步HTTP请求转换为异步操作
   • 保持与项目现有异步架构的兼容性

2. 结果解析：

   • 通过BeautifulSoup解析HTML响应
   • 使用CSS选择器.b_algo定位搜索结果条目
   • 提取链接的href属性

3. 分页处理：

   • 通过first参数实现分页
   • 自动计算所需页数(num_results // 10 + 1)

常见问题与优化方案

1. 搜索结果为空的问题

解决方案：

• 增加超时时间至30秒
• 调整Accept-Language头部以支持中文搜索：

  'Accept-Language': 'en-US,en;q=0.9,zh-CN;q=0.8,zh;q=0.7'
  

• 使用国内Bing域名(https://www.cn.bing.com)

2. 性能优化建议

1. 缓存机制：

   • 实现搜索结果的本地缓存
   • 减少重复搜索请求

2. 结果过滤：

   • 添加域名白名单/黑名单
   • 结果相关性排序

3. 错误处理：

   • 增加重试机制
   • 更完善的异常捕获

替代方案比较

除了Bing搜索，开发者还可以考虑其他搜索方案：

1. BochaAI搜索API：

   • 提供结构化的搜索结果(URL、标题、摘要等)
   • 更适合国内网络环境
   • 需要API密钥配置

2. 混合搜索策略：

   • 根据查询内容自动选择搜索引擎
   • 实现多引擎结果融合

最佳实践建议

1. 配置管理：

   • 将搜索引擎配置参数化
   • 支持运行时切换

2. 测试验证：

   • 编写单元测试验证搜索功能
   • 实现集成测试确保与Agent的兼容性

3. 监控日志：

   • 记录搜索请求和结果
   • 实现使用情况统计

总结

本文详细介绍了在OpenManus项目中实现Bing搜索替代方案的技术细节。通过创建自定义搜索工具类，开发者可以灵活地集成不同的搜索引擎服务。方案不仅解决了基本的搜索功能需求，还提供了性能优化和错误处理的改进建议，为开发者构建更强大的AI代理提供了可靠的信息获取能力。