Open-Policy-Agent (OPA) 0.67.0版本中的分块传输编码问题分析

在Open-Policy-Agent (OPA)策略引擎的最新0.67.0版本中，开发团队发现了一个与HTTP分块传输编码(Chunked Transfer Encoding)相关的重要兼容性问题。这个问题影响了使用Go语言客户端与OPA服务交互的应用程序，导致请求处理异常。

问题现象

当客户端向OPA服务发送带有"Transfer-Encoding: chunked"头的HTTP POST请求时，服务端无法正确解析请求体中的JSON数据。具体表现为OPA返回的响应中包含警告信息，提示请求中缺少"input"键，而实际上请求体中是包含完整输入数据的。

这个问题在0.66.0及更早版本中并不存在，通过代码审查可以确定问题源于0.67.0版本中引入的请求体大小限制相关代码变更。

技术背景

HTTP分块传输编码是HTTP/1.1协议中的一项特性，它允许服务器在不知道内容长度的情况下开始发送响应。对于请求而言，客户端也可以使用这种机制发送未知长度的请求体。在Go语言的net/http包中，分块编码是自动处理的，开发者通常不需要显式设置。

OPA 0.67.0版本引入了对请求体大小的限制功能，旨在防止潜在的内存耗尽攻击。然而，新实现的请求体读取逻辑没有正确处理分块编码的请求，导致请求体内容无法被完整读取和解析。

影响范围

这个问题主要影响以下场景：

1. 使用Go语言标准库http.Client发送请求到OPA服务的应用
2. 请求体大小未知或较大的HTTP POST请求
3. 使用默认传输设置的Go客户端

由于Go语言net/http包会自动为某些请求添加分块传输编码，许多Go客户端应用在升级到OPA 0.67.0后可能会遇到这个问题。

临时解决方案

在官方修复发布前，受影响用户可以采取以下临时解决方案：

对于Go客户端，可以显式设置ContentLength并清空TransferEncoding：

req.ContentLength = r.ContentLength
req.TransferEncoding = []string{}
resp, err := client.Do(req)

这种方法强制使用非分块传输模式，可以绕过当前版本的问题。

问题本质

深入分析表明，问题出在请求体读取逻辑与分块解码器的交互上。新引入的请求体大小限制功能在读取数据时，没有正确处理分块编码的流式特性，导致请求体被截断或完全无法解析。

修复方向

正确的修复应该考虑以下几点：

1. 在限制请求体大小的同时保留对分块编码的支持
2. 确保与各种HTTP客户端实现的兼容性
3. 维持安全边界，防止恶意的大请求体攻击

开发团队已经确认了这个问题并计划在后续版本中发布修复。对于生产环境中的关键应用，建议暂时停留在0.66.0版本，或应用上述临时解决方案。

这个问题提醒我们，在引入新的安全限制时，需要全面考虑各种协议特性和客户端行为，确保不会破坏现有的合法使用场景。