Prometheus Node Exporter文件系统监控异常排查指南

问题现象

在Debian系统上使用Prometheus Node Exporter时，发现挂载在/mnt目录下的磁盘分区（如/dev/sdb1）未被纳入监控指标。具体表现为node_filesystem_size_bytes和node_filesystem_free_bytes这两个关键指标中缺失了/mnt目录下的文件系统数据。

技术背景

Prometheus Node Exporter是用于采集主机指标的守护进程，其中filesystem collector负责收集文件系统相关指标。正常情况下，它会通过读取/proc/mounts文件来识别所有已挂载的文件系统，并采集其容量和使用情况数据。

根本原因

经过分析发现，这是Debian维护团队专门设计的修改行为。Debian在打包时应用了一个特殊补丁，该补丁默认排除了挂载在/mnt目录下的所有文件系统。这种设计可能是出于安全考虑或遵循某些系统管理规范。

影响范围

该问题特定于：

1. 使用Debian/Ubuntu等衍生发行版的系统
2. 通过官方仓库安装的prometheus-node-exporter包
3. 文件系统挂载点位于/mnt目录下

解决方案

方案一：修改收集器配置

1. 编辑Node Exporter的配置文件（通常位于/etc/default/prometheus-node-exporter）
2. 添加以下参数：

ARGS="--collector.filesystem.ignored-mount-points=^/(sys|proc|dev|run|var/lib/docker)($|/)"

3. 重启服务：systemctl restart prometheus-node-exporter

方案二：重建软件包

1. 获取源码包：apt source prometheus-node-exporter
2. 修改debian/patches/0001-Debian-defaults.patch文件
3. 移除对/mnt目录的过滤规则
4. 重新构建并安装修改后的deb包

方案三：使用官方二进制

直接下载Prometheus官方发布的Node Exporter二进制版本，避免使用Debian修改过的版本。

技术建议

1. 生产环境中建议使用方案一，这是最安全可靠的修改方式
2. 对于需要监控/mnt目录的特殊场景，可以考虑使用bind mount将目录挂载到其他位置
3. 定期检查Node Exporter的指标输出，确保所有关键文件系统都被监控

扩展知识

文件系统监控是基础设施监控的重要组成部分，需要注意：

• 不同文件系统类型（ext4/xfs/btrfs等）可能有不同的监控特性
• 网络文件系统（NFS/CIFS）需要额外考虑网络延迟因素
• 对于容器化环境，要注意区分宿主和容器的文件系统指标