LibreNMS监控Cisco C6800交换机SNMP响应延迟问题分析与解决方案

问题背景

在使用LibreNMS网络管理系统对Cisco C6800系列交换机进行监控时，部分用户报告在2024年12月更新后出现了严重的SNMP响应延迟问题。主要表现为设备在LibreNMS轮询期间出现超时，或完全停止响应所有SNMP请求。

问题现象

受影响的Cisco C6800交换机在系统日志中会记录类似以下信息：

%SNMP-3-RESPONSE_DELAYED: processing GetNext of ciscoMgmt.661.1.3.1 (19928 msecs)
%SNMP-3-RESPONSE_DELAYED: processing GetNext of ciscoMgmt.661.1.3.1.1.6 (20264 msecs)

这些延迟信息表明交换机在处理特定MIB(OID)时出现了性能问题，响应时间长达20秒左右，严重影响监控系统的正常运行。

根本原因分析

经过深入调查，发现问题根源在于CISCO-WAN-3G-MIB的使用。这个MIB与3G无线广域网模块相关，但在某些C6800交换机上，当LibreNMS通过SNMP bulkwalk方式查询这些OID时，会导致交换机SNMP进程资源占用过高，甚至陷入某种循环状态。

值得注意的是：

1. 并非所有C6800交换机都会受到影响，这与设备的具体配置和硬件模块有关
2. 问题在LibreNMS 24.11.0版本之前不存在，但在后续版本中出现
3. 即使无线模块在LibreNMS中被禁用，系统仍会尝试查询这些OID

解决方案

方案一：禁用SNMP bulkwalk方式查询特定OID

这是最推荐的解决方案，通过配置LibreNMS不对特定OID使用bulkwalk方式查询：

lnms config:set os.ios.oids.no_bulk '["CISCO-WAN-3G-MIB::c3gModemStatus","CISCO-WAN-3G-MIB::c3gGsmCurrentBand","CISCO-WAN-3G-MIB::c3gGsmPacketService","CISCO-WAN-3G-MIB::c3gGsmCurrentRoamingStatus","CISCO-WAN-3G-MIB::c3gGsmSimStatus","CISCO-WAN-3G-MIB::c3gGsmNumberOfNearbyCell","CISCO-WAN-3G-MIB::c3gModemTemperature","CISCO-WAN-3G-MIB::c3gGsmIdentityTable"]'

这个命令会将这些OID标记为不使用bulkwalk方式查询，转而使用普通的snmpwalk方式，从而避免触发交换机的性能问题。

方案二：在交换机上配置SNMP视图排除

对于有权限管理交换机配置的用户，可以在交换机上配置SNMP视图来排除这些MIB：

snmp-server view cutdown ciscoWan3gMIB excluded

但需要注意的是，某些Cisco IOS版本可能不完全支持这种排除方式，或者需要更精确的OID指定。

方案三：物理移除MIB文件

作为临时解决方案，可以将CISCO-WAN-3G-MIB文件从LibreNMS服务器的mibs/cisco目录中移出，这样系统就无法识别和查询这些OID。但这不是推荐的长久解决方案，因为可能会影响其他设备的正常监控。

最佳实践建议

1. 对于Cisco C6800系列交换机，建议优先采用方案一，因为它对系统的影响最小且最可控
2. 在实施解决方案后，应密切监控交换机的SNMP响应时间和CPU利用率，确认问题已解决
3. 对于大型网络环境，可以考虑在LibreNMS中为C6800设备创建特定的设备组，并应用这些配置
4. 定期检查Cisco官方是否有针对此问题的固件更新

总结

Cisco C6800交换机与LibreNMS监控系统间的SNMP性能问题主要源于特定MIB的查询方式。通过调整查询策略或限制相关OID的访问，可以有效解决这一问题。网络管理员应根据自身环境选择最适合的解决方案，确保监控系统的稳定运行。