StatsHouse 开源监控系统使用教程
2024-09-16 13:18:43作者:舒璇辛Bertina
1. 项目介绍
StatsHouse 是一个高可用、可扩展的多租户监控系统,专为大规模应用设计。它是 vk.com 的主要监控系统,截至 2023 年 11 月,主集群每秒接收 12 亿个指标,来自 22000 台服务器。StatsHouse 具有以下特点:
- 高可用性:自动处理网络不可用和单机故障。
- 可扩展性:支持大规模数据处理和存储。
- 多租户:允许多个用户或团队共享同一系统。
- 低延迟:默认指标分辨率为 1 秒,延迟为 5 秒。
- 长期存储:自动降采样高分辨率数据,并提供长期存储。
2. 项目快速启动
2.1 安装依赖
首先,确保你已经安装了 Docker 和 Docker Compose。
2.2 克隆项目
git clone https://github.com/VKCOM/statshouse.git
cd statshouse
2.3 启动 StatsHouse
使用 Docker Compose 启动 StatsHouse:
docker-compose up -d
2.4 发送指标
你可以使用 Python 客户端发送指标:
import statshouse
statshouse.value("processing_time", ["subsystem": "foo", "protocol": "bar"], 0.239)
2.5 查看指标
访问 http://localhost:8080 查看 StatsHouse 的 UI,实时查看指标数据。
3. 应用案例和最佳实践
3.1 应用案例
StatsHouse 被广泛应用于 vk.com,用于监控大规模分布式系统的性能和健康状况。它能够处理每秒 12 亿个指标,确保系统的稳定性和可靠性。
3.2 最佳实践
- 合理配置预算:StatsHouse 使用每秒预算来管理网络和磁盘使用,合理配置预算可以避免系统过载。
- 使用降采样:对于高频指标,使用降采样功能可以减少存储和计算压力。
- 集成 Grafana:StatsHouse 提供了 Grafana 数据源插件,可以方便地集成到现有的监控系统中。
4. 典型生态项目
4.1 Grafana
StatsHouse 提供了 Grafana 数据源插件,可以与 Grafana 无缝集成,提供更丰富的可视化和报警功能。
4.2 Prometheus
虽然 StatsHouse 本身支持 PromQL,但它也可以与 Prometheus 集成,利用 Prometheus 的强大查询和报警功能。
4.3 ClickHouse
StatsHouse 内部使用 ClickHouse 作为主要数据存储,ClickHouse 的高性能和可扩展性为 StatsHouse 提供了强大的数据处理能力。
通过本教程,你应该已经掌握了 StatsHouse 的基本使用方法和最佳实践。希望你能利用 StatsHouse 构建一个高效、可靠的监控系统。
登录后查看全文
热门项目推荐
kernelopenEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。C092
baihu-dataset异构数据集“白虎”正式开源——首批开放10w+条真实机器人动作数据,构建具身智能标准化训练基座。00
mindquantumMindQuantum is a general software library supporting the development of applications for quantum computation.Python058
PaddleOCR-VLPaddleOCR-VL 是一款顶尖且资源高效的文档解析专用模型。其核心组件为 PaddleOCR-VL-0.9B,这是一款精简却功能强大的视觉语言模型(VLM)。该模型融合了 NaViT 风格的动态分辨率视觉编码器与 ERNIE-4.5-0.3B 语言模型,可实现精准的元素识别。Python00
GLM-4.7GLM-4.7上线并开源。新版本面向Coding场景强化了编码能力、长程任务规划与工具协同,并在多项主流公开基准测试中取得开源模型中的领先表现。 目前,GLM-4.7已通过BigModel.cn提供API,并在z.ai全栈开发模式中上线Skills模块,支持多模态任务的统一规划与协作。Jinja00
AgentCPM-Explore没有万亿参数的算力堆砌,没有百万级数据的暴力灌入,清华大学自然语言处理实验室、中国人民大学、面壁智能与 OpenBMB 开源社区联合研发的 AgentCPM-Explore 智能体模型基于仅 4B 参数的模型,在深度探索类任务上取得同尺寸模型 SOTA、越级赶上甚至超越 8B 级 SOTA 模型、比肩部分 30B 级以上和闭源大模型的效果,真正让大模型的长程任务处理能力有望部署于端侧。Jinja00
项目优选
收起
deepin linux kernel
C
27
11
OpenHarmony documentation | OpenHarmony开发者文档
Dockerfile
474
3.53 K
React Native鸿蒙化仓库
JavaScript
287
339
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
224
92
Ascend Extension for PyTorch
Python
283
316
暂无简介
Dart
723
174
Nop Platform 2.0是基于可逆计算理论实现的采用面向语言编程范式的新一代低代码开发平台,包含基于全新原理从零开始研发的GraphQL引擎、ORM引擎、工作流引擎、报表引擎、规则引擎、批处理引引擎等完整设计。nop-entropy是它的后端部分,采用java语言实现,可选择集成Spring框架或者Quarkus框架。中小企业可以免费商用
Java
10
1
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
850
440
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
1.27 K
699
🔥LeetCode solutions in any programming language | 多种编程语言实现 LeetCode、《剑指 Offer(第 2 版)》、《程序员面试金典(第 6 版)》题解
Java
65
19