Apache APISIX与etcd TLS认证问题深度解析

背景介绍

Apache APISIX作为一款高性能的云原生API网关，其配置存储通常依赖于etcd。在生产环境中，为了保证通信安全，APISIX与etcd之间的连接通常会启用TLS加密。然而，在实际部署过程中，TLS认证配置不当会导致连接失败，影响整个系统的正常运行。

问题现象

当APISIX尝试连接启用了TLS的etcd集群时，可能会出现以下错误信息：

2024/02/19 06:45:05 [error] 49#49: *93 [lua] init.lua:328: sync_local_conf_to_etcd(): failed to get current plugins: https://10.10.10.93:2379: certificate host mismatch

这表明APISIX无法验证etcd服务器的证书，导致连接失败。从日志中可以明确看到"certificate host mismatch"的错误提示，说明证书验证过程中出现了主机名不匹配的问题。

根本原因分析

1. 自签名证书的信任问题

在测试环境中，我们通常使用自签名证书来配置TLS。这些证书没有经过公共CA(证书颁发机构)的签名，因此默认情况下客户端(APISIX)不会信任这些证书。

2. 证书SAN配置问题

查看证书的Subject Alternative Name(SAN)扩展字段，确保包含了etcd服务器实际使用的主机名或IP地址。如果证书中没有包含客户端连接时使用的主机名/IP，验证就会失败。

3. 证书验证机制

APISIX默认会验证etcd服务器的证书，包括：

• 证书是否由受信任的CA签发
• 证书中的主机名/IP是否与连接的目标匹配
• 证书是否在有效期内

解决方案

方案一：关闭证书验证(仅限测试环境)

在config.yaml配置文件中，可以添加verify: false来禁用证书验证：

etcd:
  host:
    - "https://10.10.10.93:2379"
  tls:
    cert: /usr/local/apisix/certs/kubernetes.pem
    key: /usr/local/apisix/certs/kubernetes-key.pem
    verify: false

这种方法简单快捷，但会降低安全性，不建议在生产环境中使用。

方案二：正确配置证书(推荐)

1. 确保证书包含正确的SAN信息
   生成证书时，需要在CSR配置文件中明确指定所有可能使用的主机名和IP地址：

   "hosts": [
     "127.0.0.1",
     "10.10.10.93",
     "kubernetes",
     "kubernetes.default"
   ]
   

2. 配置APISIX信任CA证书
   将签发etcd证书的CA证书配置到APISIX的信任链中：

   apisix:
     ssl:
       ssl_trusted_certificate: /usr/local/apisix/certs/ca.pem
   

3. 保持verify为true
   这样既能保证通信安全，又能确保主机名验证通过。

生产环境最佳实践

1. 使用正规CA签发的证书
   生产环境建议使用Let's Encrypt等公共CA或企业内部的PKI系统签发的证书。

2. 完善的证书管理

   • 确保证书及时更新
   • 监控证书到期时间
   • 使用证书轮换机制

3. 网络隔离
   即使启用了TLS，也应将etcd集群部署在内网环境中，限制外部访问。

技术原理深入

TLS握手过程中，客户端会对服务器证书进行多项验证：

1. 证书链验证
   客户端会验证服务器证书是否由受信任的CA签发，包括检查整个证书链。

2. 主机名验证
   客户端会检查证书中的CN(Common Name)或SAN(Subject Alternative Name)是否与连接的目标主机名匹配。

3. 有效期检查
   客户端会验证证书是否在有效期内，没有过期也没有被吊销。

当使用自签名证书时，由于证书不在客户端的默认信任库中，且可能缺少正确的主机名信息，就会导致验证失败。

总结

APISIX与etcd的TLS连接问题通常源于证书配置不当。在测试环境中，可以临时关闭验证快速解决问题；但在生产环境中，应当遵循安全最佳实践，正确配置证书和信任链。理解TLS验证机制有助于快速定位和解决类似问题，确保系统安全稳定运行。