ZLMediaKit UDP推流丢包问题分析与优化实践

问题背景

在使用ZLMediaKit进行多路国标推流时，开发者遇到了UDP推流丢包的问题。具体表现为接收端频繁出现RTP丢包警告，但奇怪的是发送端的抓包分析显示序列号(sequence number)不连续，而接收端用FFmpeg解码却没有报错。

问题现象分析

通过日志和抓包分析，可以观察到以下关键现象：

1. 接收端日志显示RTP包丢失，序列号出现跳跃
2. 发送端抓包显示序列号确实不连续
3. FFmpeg解码端未报告错误
4. 网络接口统计(TX_DROP)未显示丢包

深入排查

经过深入排查，开发者采取了以下验证步骤：

1. 在RtpCache中添加序列号连续性检查，确认发送端序列号计算逻辑正确
2. 检查网络配置参数，确认已优化：
   • 增大socket缓冲区大小
   • 调整TCP内存参数
   • 优化系统网络核心参数
3. 通过ethtool检查网卡统计，确认无硬件丢包

问题根源

最终定位到问题的核心原因是：单路RTP推流承载过多路视频流导致UDP发送性能瓶颈。具体表现为：

1. 单线程处理过多路RTP流
2. UDP发送速率超过系统处理能力
3. 缺乏适当的发送间隔控制

解决方案与优化实践

针对这一问题，开发者尝试并验证了以下解决方案：

方案一：强制发送间隔

在RtpSender.cpp中强制加入2ms的发送间隔：

if (_rtp_send_ticker.elapsedTime() <= 2) {
    usleep(2);
}
_socket_rtp->send(std::make_shared<BufferRtp>(std::move(packet), nullptr, 0, ++i == size);
_rtp_send_ticker.resetTime();

这种方法虽然有效，但不够优雅，可能影响整体性能。

方案二：分流处理（推荐方案）

更合理的解决方案是将负载分散到多个源(source)上：

1. 将500路流分散到50个不同的source
2. 每个source处理10路流
3. 通过负载均衡避免单点瓶颈

这种架构调整后，系统能够稳定处理500路推流而不出现丢包。

技术原理与最佳实践

1. UDP发送特性：

   • UDP是无连接的协议，不保证可靠性
   • 高频率发送时可能出现内核缓冲区溢出
   • 单线程处理能力有限

2. ZLMediaKit设计考量：

   • 默认设计不适合单路处理极多路流
   • 推荐合理分配流处理负载
   • 多线程/多进程架构更适合高并发场景

3. 性能优化建议：

   • 监控系统UDP发送缓冲区使用情况
   • 合理设置socket缓冲区大小
   • 考虑使用多网卡分流
   • 对于关键业务，可考虑改用TCP或增加重传机制

总结

通过本次问题排查，我们深入理解了ZLMediaKit在高并发UDP推流场景下的性能特点。对于大规模推流应用，合理的架构设计和负载分配至关重要。开发者应当根据实际业务需求，选择适当的并发策略和网络参数配置，以确保视频流的稳定传输。