Requests库SSL证书验证问题解析与解决方案

Requests是Python中最流行的HTTP客户端库之一，在2.32.0版本中引入了一项关于SSLContext的重要改进。这项改进旨在通过重用全局SSLContext来提高请求性能，特别是在Windows系统上使用OpenSSL 3.x构建的Python版本时，可以减少证书加载时间。

问题背景

在2.32.0版本发布后，一些用户报告了在使用本地根证书颁发机构(CA)签名的网站时遇到了SSL证书验证问题。具体表现为当尝试访问由本地根CA签名的网站时，系统会抛出"SSLCertVerificationError: unable to get local issuer certificate"错误。

技术分析

这个问题源于2.32.0版本对SSLContext处理方式的改变。在之前的版本(如2.31.1)中，以下代码可以正常工作：

from requests.adapters import HTTPAdapter
import requests
from requests.packages.urllib3.util.ssl_ import create_urllib3_context

class SSLContextAdapter(HTTPAdapter):
    def init_poolmanager(self, *args, **kwargs):
        context = create_urllib3_context()
        context.load_default_certs()  # 加载系统的CA证书
        kwargs['ssl_context'] = context
        return super().init_poolmanager(*args, **kwargs)

但在2.32.x版本中，这种实现方式会导致证书验证失败。这是因为新版本改变了SSLContext的管理方式，不再支持通过这种方式覆盖默认的SSLContext。

解决方案

Requests核心开发团队提供了两种解决方案：

临时解决方案

可以使用内部变量_preloaded_ssl_context来加载默认证书：

from requests.adapters import HTTPAdapter, _preloaded_ssl_context

class SSLContextAdapter(HTTPAdapter):
    def init_poolmanager(self, *args, **kwargs):
        _preloaded_ssl_context.load_default_certs()
        return super().init_poolmanager(*args, **kwargs)

但需要注意的是，这种方法依赖于内部实现细节，不是官方推荐的做法。

推荐解决方案

更健壮的解决方案是在适配器的__init__方法中创建自定义SSLContext，并通过build_connection_pool_key_attributes方法将其注入：

class SSLContextAdapter(HTTPAdapter):
    def __init__(
        self,
        pool_connections=DEFAULT_POOLSIZE,
        pool_maxsize=DEFAULT_POOLSIZE,
        max_retries=DEFAULT_RETRIES,
        pool_block=DEFAULT_POOLBLOCK,
    ):
        super().__init__()
        self.custom_context = create_urllib3_context()
        self.custom_context.load_default_certs()
    
    def build_connection_pool_key_attributes(self, request, verify, cert=None):
        host_params, pool_kwargs = super().build_connection_pool_key_attributes(request, verify, cert)
        pool_kwargs['ssl_context'] = self.custom_context
        return host_params, pool_kwargs

这种方法更加符合Requests库的设计理念，且不会依赖内部实现细节。

最佳实践

对于大多数用户来说，升级到最新版本的Requests库(2.32.3及以上)并使用推荐的解决方案是最佳选择。如果必须自定义SSL验证行为，建议：

1. 在适配器初始化时创建SSLContext
2. 通过标准API注入自定义SSLContext
3. 避免直接修改内部状态或使用内部变量

通过这种方式，可以确保代码的稳定性和向前兼容性，同时满足自定义证书验证的需求。

总结

Requests库在2.32.0版本中对SSL处理进行了优化，这虽然带来了一些兼容性变化，但也提供了更高效的证书管理机制。理解这些变化并采用推荐的解决方案，可以帮助开发者更好地利用Requests库的强大功能，同时确保与本地CA签名网站的兼容性。