首页
/ YugabyteDB中ASH监控数据中空闲事件的识别与过滤优化

YugabyteDB中ASH监控数据中空闲事件的识别与过滤优化

2025-05-25 10:22:24作者:庞眉杨Will

背景介绍

在数据库性能监控中,Active Session History(ASH)是一个非常重要的功能组件,它通过定期采样会话活动状态来帮助DBA分析数据库性能问题。然而在实际使用YugabyteDB的ASH功能时,我们发现监控数据中包含了大量实际上处于空闲状态的会话记录,这些记录会干扰我们对真实性能问题的分析。

问题现象

在YugabyteDB 2.25版本中,用户发现ASH数据中存在以下异常情况:

  1. 在系统空闲状态下,ASH记录中80%以上都是query_id为7的记录
  2. 这些记录主要来自pg_cron扩展的启动器进程
  3. 这些记录对应的会话实际上处于空闲状态,几乎没有消耗系统资源
  4. 类似情况也出现在query_id为5的记录中

技术分析

通过分析ASH采样机制和pg_cron扩展的工作原理,我们发现:

  1. ASH采样器会定期捕获所有会话的状态,包括真正空闲的会话
  2. pg_cron作为后台任务调度器,会保持长期运行的会话
  3. 这些后台会话大部分时间处于等待状态,但ASH仍会记录其状态
  4. 当前ASH实现没有有效区分活跃会话和空闲会话的机制

解决方案

针对这个问题,YugabyteDB开发团队已经提交了修复补丁(c9911097f6ba3e8455b8af8c7f9643ca7bcecdff),主要改进包括:

  1. 增强ASH采样逻辑,更好地区分活跃和空闲会话
  2. 优化对pg_cron等后台扩展的监控处理
  3. 减少非活动会话在ASH数据中的占比

实际应用建议

对于暂时无法升级的用户,可以通过以下SQL查询识别和过滤这些空闲事件:

-- 识别主要空闲query_id
SELECT query_id, COUNT(*) 
FROM yb_active_session_history 
GROUP BY query_id 
ORDER BY COUNT(*) DESC;

-- 分析特定query_id的来源
SELECT pid, application_name 
FROM pg_stat_activity 
WHERE pid IN (
  SELECT pid FROM yb_active_session_history 
  WHERE query_id = 7
);

-- 按时间分析空闲事件分布
SELECT 
  to_char(sample_time, 'HH24:MI:SS') as sample_second,
  COUNT(*) as idle_count
FROM yb_active_session_history
WHERE query_id = 7
GROUP BY 1
ORDER BY 1;

总结

YugabyteDB通过持续优化ASH监控功能,提高了性能数据的准确性和可用性。对于数据库管理员来说,理解如何识别和过滤监控数据中的噪声是进行有效性能分析的重要技能。建议用户及时升级到包含此修复的版本,以获得更精准的监控体验。

登录后查看全文
热门项目推荐

热门内容推荐

最新内容推荐

项目优选

收起
docsdocs
OpenHarmony documentation | OpenHarmony开发者文档
Dockerfile
144
1.93 K
kernelkernel
deepin linux kernel
C
22
6
ohos_react_nativeohos_react_native
React Native鸿蒙化仓库
C++
192
274
openGauss-serveropenGauss-server
openGauss kernel ~ openGauss is an open source relational database management system
C++
145
189
RuoYi-Vue3RuoYi-Vue3
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
930
553
nop-entropynop-entropy
Nop Platform 2.0是基于可逆计算理论实现的采用面向语言编程范式的新一代低代码开发平台,包含基于全新原理从零开始研发的GraphQL引擎、ORM引擎、工作流引擎、报表引擎、规则引擎、批处理引引擎等完整设计。nop-entropy是它的后端部分,采用java语言实现,可选择集成Spring框架或者Quarkus框架。中小企业可以免费商用
Java
8
0
openHiTLSopenHiTLS
旨在打造算法先进、性能卓越、高效敏捷、安全可靠的密码套件,通过轻量级、可剪裁的软件技术架构满足各行业不同场景的多样化要求,让密码技术应用更简单,同时探索后量子等先进算法创新实践,构建密码前沿技术底座!
C
423
392
金融AI编程实战金融AI编程实战
为非计算机科班出身 (例如财经类高校金融学院) 同学量身定制,新手友好,让学生以亲身实践开源开发的方式,学会使用计算机自动化自己的科研/创新工作。案例以量化投资为主线,涉及 Bash、Python、SQL、BI、AI 等全技术栈,培养面向未来的数智化人才 (如数据工程师、数据分析师、数据科学家、数据决策者、量化投资人)。
Jupyter Notebook
75
66
CangjieCommunityCangjieCommunity
为仓颉编程语言开发者打造活跃、开放、高质量的社区环境
Markdown
1.11 K
0
openHiTLS-examplesopenHiTLS-examples
本仓将为广大高校开发者提供开源实践和创新开发平台,收集和展示openHiTLS示例代码及创新应用,欢迎大家投稿,让全世界看到您的精巧密码实现设计,也让更多人通过您的优秀成果,理解、喜爱上密码技术。
C
64
511