Spring AI项目中SimpleLoggerAdvisor重复订阅导致聊天中断问题分析
问题现象
在Spring AI项目中,开发者使用SimpleLoggerAdvisor进行日志记录时发现了一个异常现象:每次聊天会话中,向模型发送的请求消息数量会随着聊天次数的增加而递增。具体表现为第一次聊天发送1条消息,第二次发送2条,第三次发送3条,最终导致模型因超出限制而中断。
问题根源分析
通过对代码的审查,我们发现问题的核心在于SimpleLoggerAdvisor的实现方式。该advisor同时实现了StreamAroundAdvisor和CallAroundAdvisor两个接口,但在处理流式响应时存在订阅管理不当的问题。
关键问题点在于aroundStream方法中的响应处理逻辑。当使用MessageAggregator聚合响应时,如果没有正确处理订阅关系,可能会导致多次订阅同一个响应流,从而产生消息重复处理的现象。
技术细节
-
Advisor链机制:Spring AI中的advisor链允许在请求处理前后插入自定义逻辑。SimpleLoggerAdvisor同时实现了流式和非流式两种处理接口。
-
响应订阅问题:在流式处理中,每次订阅Flux都会触发新的请求处理流程。如果聚合器或日志记录逻辑没有妥善管理订阅,就会导致重复处理。
-
资源消耗:随着聊天次数的增加,重复订阅会导致请求消息数量呈线性增长,最终超出模型的处理能力限制。
解决方案
要解决这个问题,我们需要重构SimpleLoggerAdvisor的实现,确保:
-
单一订阅原则:确保每个响应流只被订阅一次,避免重复处理。
-
响应共享:对于需要多次使用的响应流,使用
share()或cache()操作符来共享订阅。 -
清晰的日志记录边界:明确区分请求日志和响应日志的记录时机,避免交叉影响。
优化后的实现建议
@Override
public Flux<AdvisedResponse> aroundStream(AdvisedRequest advisedRequest, StreamAroundAdvisorChain chain) {
// 记录请求日志
advisedRequest.messages().forEach(message -> {
logger.info("request: {}", message);
});
// 获取响应流并共享订阅
Flux<AdvisedResponse> sharedResponses = chain.nextAroundStream(advisedRequest).share();
// 附加响应处理逻辑
return sharedResponses
.doOnNext(response -> {
if (response.isLast()) {
logger.info("token使用量,response: {}",
response.response().getMetadata().getUsage());
}
});
}
最佳实践
-
避免多重继承:除非必要,advisor最好只实现一种处理接口(流式或非流式)。
-
谨慎使用聚合器:MessageAggregator等工具需要特别注意订阅管理。
-
性能监控:实现日志记录功能时,应同时监控其对系统性能的影响。
-
资源清理:确保所有响应流都有适当的终止处理,避免资源泄漏。
总结
Spring AI项目中的advisor机制提供了强大的扩展能力,但也需要开发者理解响应式编程的基本原则。通过正确处理流式响应的订阅关系,可以避免类似SimpleLoggerAdvisor导致的重复消息问题。在实现自定义advisor时,应当特别注意响应式流的生命周期管理,确保系统的稳定性和可靠性。
GLM-5智谱 AI 正式发布 GLM-5,旨在应对复杂系统工程和长时域智能体任务。Jinja00
GLM-5-w4a8GLM-5-w4a8基于混合专家架构,专为复杂系统工程与长周期智能体任务设计。支持单/多节点部署,适配Atlas 800T A3,采用w4a8量化技术,结合vLLM推理优化,高效平衡性能与精度,助力智能应用开发Jinja00
jiuwenclawJiuwenClaw 是一款基于openJiuwen开发的智能AI Agent,它能够将大语言模型的强大能力,通过你日常使用的各类通讯应用,直接延伸至你的指尖。Python0194- QQwen3.5-397B-A17BQwen3.5 实现了重大飞跃,整合了多模态学习、架构效率、强化学习规模以及全球可访问性等方面的突破性进展,旨在为开发者和企业赋予前所未有的能力与效率。Jinja00
AtomGit城市坐标计划AtomGit 城市坐标计划开启!让开源有坐标,让城市有星火。致力于与城市合伙人共同构建并长期运营一个健康、活跃的本地开发者生态。01
awesome-zig一个关于 Zig 优秀库及资源的协作列表。Makefile00