Spider-RS v2.26.1版本发布：性能优化与链接处理增强

Spider-RS是一个用Rust编写的高性能网络爬虫框架，专注于提供高效、可靠的网页抓取能力。该项目采用了现代化的Rust异步编程模型，能够充分利用多核CPU资源，同时保证内存安全。

版本亮点

本次发布的v2.26.1版本主要带来了两个重要改进：性能优化和链接处理功能增强。

性能优化：跳过重复URL解析

在之前的版本中，Spider-RS在处理每个页面时都会对URL进行解析。虽然URL解析本身是一个相对快速的操作，但当处理大量页面时，这种重复解析会累积成显著的性能开销。

新版本通过缓存URL解析结果，避免了重复解析同一URL的情况。具体实现上：

1. 新增了page::Page::set_url_parsed_direct_empty()方法，允许直接设置已解析的URL
2. 提供了page::Page::get_url_parsed()方法来获取已解析的URL信息
3. 内部机制会自动重用已解析的URL数据

这种优化对于大规模爬取任务尤其有利，可以显著减少CPU使用率和整体爬取时间。

链接处理功能增强

新版本改进了页面链接的收集和处理能力：

1. 跨域链接支持：现在可以在调用页面链接方法时传入第二个参数，指定新的目标域。这使得爬虫能够更灵活地处理跨域链接，特别适合需要从多个相关网站收集数据的场景。

2. 根域识别改进：框架现在能够更准确地识别和处理正确的根域，确保链接解析的一致性。这一改进解决了之前版本中在某些边缘情况下可能出现的域解析错误问题。

3. 完整链接输出：CLI工具的抓取功能现在会输出完整的页面链接，而不仅仅是相对路径。这使得结果更易于理解和使用。

升级注意事项

对于直接使用page::Page::take_url方法的开发者，需要注意现在可能需要先调用page::Page::set_url_parsed_direct_empty()方法，或者使用page::Page::get_url_parsed()方法来获取URL信息。这一变化是为了支持新的性能优化特性。

技术实现细节

在底层实现上，Spider-RS v2.26.1通过以下方式实现了这些改进：

1. URL解析缓存：引入了一个轻量级的缓存机制来存储已解析的URL信息，避免了重复解析的开销。

2. 域处理重构：重写了域处理逻辑，使其更加健壮和准确。新的实现能够正确处理各种复杂的域情况，包括子域、国际化域名等。

3. 链接收集优化：改进了链接收集算法，使其能够更高效地处理页面中的链接，同时支持新的跨域收集功能。

这些改进使得Spider-RS在保持原有简洁API的同时，提供了更强大的功能和更好的性能。