使用VictoriaMetrics单机版实现Kubernetes监控全攻略

前言

在现代云原生环境中，监控是保障系统稳定性的关键环节。VictoriaMetrics作为一款高性能、低资源占用的时序数据库，特别适合Kubernetes环境下的监控数据存储。本文将详细介绍如何使用VictoriaMetrics单机版搭建完整的Kubernetes监控体系。

环境准备

在开始部署前，请确保已具备以下环境：

1. Kubernetes集群（版本1.31.1或兼容版本）
2. Helm包管理工具（版本3.14+）
3. kubectl命令行工具（版本1.31）

提示：虽然示例中使用的是GKE集群，但本方案同样适用于任何Kubernetes发行版，包括EKS、AKS等。

部署架构概览

整个监控系统由三个核心组件构成：

1. VictoriaMetrics单机版：作为时序数据库存储所有监控指标
2. 内置抓取器：自动发现并采集Kubernetes集群指标
3. Grafana：可视化展示监控数据

详细部署步骤

第一步：添加Helm仓库

VictoriaMetrics提供了官方Helm仓库，包含各种相关组件：

helm repo add vm https://victoriametrics.github.io/helm-charts/
helm repo update

验证仓库是否添加成功：

helm search repo vm/

该命令将列出所有可用的VictoriaMetrics相关Chart，包括单机版、集群版、日志组件等。

第二步：安装VictoriaMetrics单机版

使用以下命令安装VictoriaMetrics单机版：

helm install vmsingle vm/victoria-metrics-single -f https://docs.victoriametrics.com/guides/examples/guide-vmsingle-values.yaml

关键配置解析：

1. scrape.enabled=true：启用自动服务发现和指标抓取
2. 预配置的抓取任务包括：
   • Kubernetes API Server监控
   • 节点基础指标
   • cAdvisor容器指标
3. metric_relabel_configs：对原始指标进行标签重写，便于后续展示

安装完成后，检查Pod状态：

kubectl get pods

预期应看到vmsingle相关的Pod状态为Running。

第三步：部署Grafana可视化

添加Grafana官方仓库：

helm repo add grafana https://grafana.github.io/helm-charts
helm repo update

安装Grafana并预配置VictoriaMetrics数据源和仪表盘：

cat <<EOF | helm install my-grafana grafana/grafana -f -
datasources:
  datasources.yaml:
    apiVersion: 1
    datasources:
      - name: victoriametrics
        type: prometheus
        url: http://vmsingle-victoria-metrics-single-server.default.svc.cluster.local:8428
        access: proxy
        isDefault: true
dashboardProviders:
  dashboardproviders.yaml:
    apiVersion: 1
    providers:
    - name: 'default'
      orgId: 1
      type: file
      options:
        path: /var/lib/grafana/dashboards/default
dashboards:
  default:
    victoriametrics:
      gnetId: 10229
      revision: 22
      datasource: victoriametrics
    kubernetes:
      gnetId: 14205
      revision: 1
      datasource: victoriametrics
EOF

获取Grafana管理员密码：

kubectl get secret --namespace default my-grafana -o jsonpath="{.data.admin-password}" | base64 --decode ; echo

端口转发访问Grafana：

export POD_NAME=$(kubectl get pods --namespace default -l "app.kubernetes.io/name=grafana" -o jsonpath="{.items[0].metadata.name}")
kubectl --namespace default port-forward $POD_NAME 3000

效果验证

访问http://127.0.0.1:3000，使用admin账号和获取的密码登录后，可以看到：

1. Kubernetes集群监控仪表盘：展示节点资源使用率、Pod状态等关键指标
2. VictoriaMetrics系统仪表盘：监控VictoriaMetrics自身的运行状态

技术要点解析

1. 服务发现机制：VictoriaMetrics通过Kubernetes API自动发现需要监控的端点
2. 指标重标记：对原始指标进行标准化处理，确保标签一致性
3. 资源效率：VictoriaMetrics单机版在资源占用和性能间取得良好平衡
4. 数据保留：默认配置下数据保留期为1个月，可根据需要调整

常见问题排查

1. 指标抓取失败：检查http://vmsingle:8428/targets查看各抓取目标状态
2. Grafana无数据：验证数据源连接配置是否正确
3. 资源不足：根据集群规模调整VictoriaMetrics的资源请求和限制

扩展建议

1. 对于生产环境，考虑使用VictoriaMetrics集群版提高可用性
2. 集成告警系统，配置关键指标的告警规则
3. 根据业务需求定制Grafana仪表盘
4. 设置适当的数据保留策略，平衡存储成本和历史数据需求

总结

通过本文的部署方案，您已经建立起完整的Kubernetes监控体系。VictoriaMetrics单机版提供了高效的指标存储和查询能力，配合Grafana的可视化，使您能够全面掌握集群运行状态。这套方案具有部署简单、资源占用低的特点，非常适合中小规模的Kubernetes集群。