告别依赖冲突!LangChain4j 0.35.0 Jsoup 依赖迁移全指南
还在为 Java 项目集成 AI 能力时遇到的依赖冲突头疼?升级 LangChain4j 0.35.0 版本后,Jsoup 依赖变更可能导致编译错误或运行时异常。本文将详解这次变更的技术细节、迁移步骤及避坑指南,让你 10 分钟完成平稳过渡。
变更背景与影响范围
LangChain4j 作为 Java 生态领先的 LLM 集成框架,在 0.35.0 版本中对 HTML 文档处理模块进行架构调整。原核心模块中的 Jsoup 依赖被迁移至独立组件,这一变更影响所有使用 HTML 文档加载或转换功能的应用。
关键变更点
- 依赖位置迁移:Jsoup 从
langchain4j-core移至独立模块 document-transformers/langchain4j-document-transformer-jsoup - 版本锁定:统一使用 Jsoup 1.18.3 版本,解决多模块版本不一致问题
- API 稳定性:新增
HtmlToTextDocumentTransformer专用转换器,替代原有内联实现
技术原理与架构调整
本次变更遵循 "关注点分离" 设计原则,将 HTML 解析功能从核心模块剥离为专用组件。新架构通过 SPI (Service Provider Interface) 实现文档转换器的插拔式设计,提升框架扩展性。
模块依赖关系
graph TD
A[langchain4j-core] -->|依赖| B[langchain4j-document-transformer-jsoup]
B --> C[Jsoup 1.18.3]
D[应用项目] -->|可选依赖| B
独立后的 Jsoup 转换器模块结构如下:
langchain4j-document-transformer-jsoup/
├── pom.xml // 声明 Jsoup 1.18.3 依赖
└── src/main/java/dev/langchain4j/data/document/transformer/jsoup/
├── HtmlToTextDocumentTransformer.java // 核心转换实现
└── JsoupDocumentTransformerConfiguration.java // SPI 配置
迁移实施步骤
1. 更新 Maven/Gradle 依赖
Maven 项目需在 pom.xml 中添加新依赖:
<dependency>
<groupId>dev.langchain4j</groupId>
<artifactId>langchain4j-document-transformer-jsoup</artifactId>
<version>0.35.0</version>
</dependency>
Gradle 项目添加:
implementation 'dev.langchain4j:langchain4j-document-transformer-jsoup:0.35.0'
2. 代码实现调整
原有 HTML 处理代码:
// 旧版本实现
String html = "<html><body>LLM 应用开发</body></html>";
Document document = Document.from(html); // 内部依赖 Jsoup
需更新为:
// 新版本实现
import dev.langchain4j.data.document.transformer.jsoup.HtmlToTextDocumentTransformer;
String html = "<html><body>LLM 应用开发</body></html>";
Document document = Document.from(html);
Document transformed = new HtmlToTextDocumentTransformer().transform(document).get();
3. 冲突解决与兼容性处理
若项目中存在其他 Jsoup 依赖,需通过 Maven 依赖管理强制统一版本:
<dependencyManagement>
<dependencies>
<dependency>
<groupId>org.jsoup</groupId>
<artifactId>jsoup</artifactId>
<version>1.18.3</version>
</dependency>
</dependencies>
</dependencyManagement>
验证与测试策略
测试用例覆盖
建议添加以下测试场景验证迁移效果:
- HTML 特殊标签(如
<script>、<style>)过滤测试 - 中文乱码处理验证
- 大文件(>10MB HTML)转换性能测试
验证工具推荐
使用 integration-tests 模块中的文档处理测试套件,执行命令:
mvn test -pl integration-tests -Dtest=DocumentTransformerTest
常见问题与解决方案
Q1: 升级后出现 ClassNotFoundException: org.jsoup.Jsoup
解决:检查是否已添加 langchain4j-document-transformer-jsoup 依赖,IDE 需执行 mvn clean install 刷新依赖缓存
Q2: 转换后文本丢失格式信息
解决:新转换器默认启用紧凑模式,可通过配置保留段落结构:
HtmlToTextDocumentTransformer transformer = new HtmlToTextDocumentTransformer.Builder()
.preserveLineBreaks(true)
.build();
Q3: 与 Spring Boot 自动配置冲突
解决:在 application.properties 中排除自动配置类:
spring.autoconfigure.exclude=dev.langchain4j.autoconfigure.DocumentTransformerAutoConfiguration
迁移路线图与最佳实践
分阶段实施建议
- 评估阶段:使用
mvn dependency:tree | grep jsoup分析现有依赖 - 开发阶段:优先迁移测试环境,验证核心功能
- 灰度发布:监控生产环境日志中的
JsoupDocumentTransformer相关 WARN 日志 - 全面切换:移除旧依赖,完成最终迁移
性能优化建议
- 对高频 HTML 转换场景,使用
ThreadLocal缓存转换器实例 - 大文件处理建议使用流式转换:
HtmlToTextDocumentTransformer.stream(htmlInputStream)
总结与展望
LangChain4j 0.35.0 的 Jsoup 依赖迁移不仅解决了长期存在的依赖冲突问题,更为后续支持多种 HTML 解析引擎(如 TagSoup、HtmlUnit)奠定基础。作为开发者,及时跟进框架架构演进,既能提升项目稳定性,也能更好地利用新特性提升开发效率。
建议收藏本文档并关注 docs/latest-release-notes.md 获取最新更新。如有迁移相关问题,可通过 CONTRIBUTING.md 中指引的社区渠道获取支持。
下期预告:《LangChain4j 向量数据库集成性能对比:Milvus vs Pinecone》
Kimi-K2.5Kimi K2.5 是一款开源的原生多模态智能体模型,它在 Kimi-K2-Base 的基础上,通过对约 15 万亿混合视觉和文本 tokens 进行持续预训练构建而成。该模型将视觉与语言理解、高级智能体能力、即时模式与思考模式,以及对话式与智能体范式无缝融合。Python00- QQwen3-Coder-Next2026年2月4日,正式发布的Qwen3-Coder-Next,一款专为编码智能体和本地开发场景设计的开源语言模型。Python00
xw-cli实现国产算力大模型零门槛部署,一键跑通 Qwen、GLM-4.7、Minimax-2.1、DeepSeek-OCR 等模型Go06
PaddleOCR-VL-1.5PaddleOCR-VL-1.5 是 PaddleOCR-VL 的新一代进阶模型,在 OmniDocBench v1.5 上实现了 94.5% 的全新 state-of-the-art 准确率。 为了严格评估模型在真实物理畸变下的鲁棒性——包括扫描伪影、倾斜、扭曲、屏幕拍摄和光照变化——我们提出了 Real5-OmniDocBench 基准测试集。实验结果表明,该增强模型在新构建的基准测试集上达到了 SOTA 性能。此外,我们通过整合印章识别和文本检测识别(text spotting)任务扩展了模型的能力,同时保持 0.9B 的超紧凑 VLM 规模,具备高效率特性。Python00
KuiklyUI基于KMP技术的高性能、全平台开发框架,具备统一代码库、极致易用性和动态灵活性。 Provide a high-performance, full-platform development framework with unified codebase, ultimate ease of use, and dynamic flexibility. 注意:本仓库为Github仓库镜像,PR或Issue请移步至Github发起,感谢支持!Kotlin07
VLOOKVLOOK™ 是优雅好用的 Typora/Markdown 主题包和增强插件。 VLOOK™ is an elegant and practical THEME PACKAGE × ENHANCEMENT PLUGIN for Typora/Markdown.Less00