Agent Service Toolkit 中 ChatMessage 架构的演进与设计思考
在构建基于 LangChain 的 Agent Service Toolkit 项目时,开发团队面临了一个关于消息处理架构的重要决策。本文将深入分析 ChatMessage 类的设计演变过程,探讨不同技术方案的优劣,并最终呈现团队采纳的解决方案。
初始设计困境
项目初期实现了一个 ChatMessage 类作为 LangChain BaseMessage 的轻量级封装。随着功能迭代,这个包装层开始引入比其价值更多的复杂性,特别是在处理以下场景时:
- 需要支持 Anthropic 等不同模型的消息格式
- 要处理包含工具调用的 AIMessage
- 需要维护 run_id 等元数据信息
- 支持后台任务等扩展功能
三种设计方案对比
团队提出了三种可能的改进方向:
方案一:保持现状,继续使用 ChatMessage 抽象层。优势在于提供了统一的接口,但会增加维护成本。
方案二:完全移除 ChatMessage,直接使用 LangChain 的 BaseMessage。简化了架构但将格式处理的责任转移给了客户端。
方案三:折中方案,基于 BaseMessage 但提供标准化的简单类型处理,确保 content 始终为字符串类型。
深入技术考量
在讨论过程中,几个关键技术点被反复权衡:
-
序列化格式:LangChain 提供了 message_to_dict/messages_from_dict 方法,但其序列化格式较为冗长。作为替代,可以考虑直接使用 Pydantic 的 model_dump()。
-
run_id 处理:当前实现中将 run_id 添加到 ChatMessage,如果改用 BaseMessage 需要找到合适的存储位置,如 additional_kwargs。
-
消息类型处理:需要特别处理包含工具调用的 AIMessage,确保其内容展示的一致性。
最终架构决策
经过充分讨论,团队决定采用扩展方案一,并引入以下改进:
- 新增 "custom" 消息类型,支持任意自定义数据
- 添加 send_custom_message() 工具函数,简化自定义消息发送
- 保留 ChatMessage.from_langchain() 转换逻辑
- 通过 custom_data 字段支持扩展功能
这种设计既保持了现有接口的简洁性,又为以下场景提供了良好的扩展性:
- 后台任务处理
- 多媒体内容传输
- 自定义业务逻辑集成
实现细节与最佳实践
在实际实现中,开发者应注意:
- 自定义数据应实现合理的序列化/反序列化逻辑
- 对于复杂场景,建议使用 Pydantic 模型处理 custom_data
- 不同类型的功能应通过消息内容区分,而非创建多个消息类型
这种架构演进体现了在保持核心功能稳定的同时,如何通过精心设计的扩展点来适应未来需求变化,是构建可持续演进的 AI 服务架构的优秀实践。
HunyuanImage-3.0
HunyuanImage-3.0 统一多模态理解与生成,基于自回归框架,实现文本生成图像,性能媲美或超越领先闭源模型00ops-transformer
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。C++026Hunyuan3D-Part
腾讯混元3D-Part00GitCode-文心大模型-智源研究院AI应用开发大赛
GitCode&文心大模型&智源研究院强强联合,发起的AI应用开发大赛;总奖池8W,单人最高可得价值3W奖励。快来参加吧~0279Hunyuan3D-Omni
腾讯混元3D-Omni:3D版ControlNet突破多模态控制,实现高精度3D资产生成00Spark-Chemistry-X1-13B
科大讯飞星火化学-X1-13B (iFLYTEK Spark Chemistry-X1-13B) 是一款专为化学领域优化的大语言模型。它由星火-X1 (Spark-X1) 基础模型微调而来,在化学知识问答、分子性质预测、化学名称转换和科学推理方面展现出强大的能力,同时保持了强大的通用语言理解与生成能力。Python00GOT-OCR-2.0-hf
阶跃星辰StepFun推出的GOT-OCR-2.0-hf是一款强大的多语言OCR开源模型,支持从普通文档到复杂场景的文字识别。它能精准处理表格、图表、数学公式、几何图形甚至乐谱等特殊内容,输出结果可通过第三方工具渲染成多种格式。模型支持1024×1024高分辨率输入,具备多页批量处理、动态分块识别和交互式区域选择等创新功能,用户可通过坐标或颜色指定识别区域。基于Apache 2.0协议开源,提供Hugging Face演示和完整代码,适用于学术研究到工业应用的广泛场景,为OCR领域带来突破性解决方案。00- HHowToCook程序员在家做饭方法指南。Programmer's guide about how to cook at home (Chinese only).Dockerfile09
- PpathwayPathway is an open framework for high-throughput and low-latency real-time data processing.Python00
热门内容推荐
最新内容推荐
项目优选









