Apache DevLake中Grafana仪表板日期过滤问题的分析与解决
Apache DevLake是一个开源的数据湖平台,用于收集、分析和可视化软件开发过程中的各项指标。在使用过程中,用户发现Grafana仪表板中的"Lead Time for Changes"面板存在一个关于日期过滤的严重问题,导致在某些时间范围内无法正确显示PR的平均周期时间指标。
问题现象
在DORA Details - Lead Time for Changes仪表板中,当用户选择7天或更短的时间范围时,虽然能够看到PR详情列表,但相关的平均指标却无法正确计算和显示。这个问题特别影响短期数据分析的需求。
技术分析
问题的根源在于SQL查询中对PR创建日期(created_date)的双重过滤条件:
-
第一个条件使用Grafana的标准时间过滤函数
$__timeFilter(pr.created_date),这个条件工作正常,能够正确根据用户选择的时间范围进行过滤。 -
第二个条件使用了复杂的日期计算:
created_date >= DATE_ADD(DATE_ADD($__timeFrom(), INTERVAL -DAY($__timeFrom())+1 DAY), INTERVAL +1 MONTH)
这个条件的本意可能是为了确保只考虑从下个月开始的PR数据,但实际效果却导致了异常行为。具体来说:
- 对于小于1个月的时间范围,它会将PR的created_date与下个月的第一天进行比较,这显然是一个未来的日期,导致所有PR都被排除在外
- 对于1个月以上的时间范围,虽然能返回部分数据,但计算结果也不准确
问题验证
通过在不同时间范围下执行测试查询,可以清楚地看到这个条件返回的日期值:
- 选择"Last 5 minutes"时,返回2024-11-01(下个月的第一天)
- 选择"Last 30 days"时,返回2024-10-01(当前月的第一天)
- 选择"Last 90 days"时,返回2024-08-01(三个月前的第一天)
这种设计显然与用户期望的时间范围过滤逻辑不符,特别是在短期分析场景下会造成数据完全不可见的问题。
解决方案建议
针对这个问题,可以考虑以下几种解决方案:
-
完全移除第二个条件:既然第一个
$__timeFilter已经能够正确过滤日期范围,第二个条件可能是不必要的冗余逻辑,可以直接移除。 -
修改第二个条件:如果确实需要保留某种特殊的月份过滤逻辑,应该重新设计这个条件,确保它不会与用户选择的时间范围产生冲突。
-
统一使用Grafana标准时间过滤:最佳实践是尽量使用Grafana提供的内置时间过滤功能,避免自定义复杂的日期计算逻辑,这样可以确保与用户界面选择的时间范围保持一致。
实施建议
在实际修复中,建议:
- 首先评估第二个条件是否确实有业务必要性
- 如果必要,重新设计其逻辑以确保不会与短期时间范围冲突
- 如果不必要,直接移除该条件,仅保留标准的Grafana时间过滤
- 进行全面测试,验证在各种时间范围选择下的数据准确性
这个问题虽然看似简单,但它影响了核心指标的可视化,对于依赖这些数据进行决策的团队来说尤为重要。通过合理的修复,可以确保DevLake平台在各种时间分析场景下都能提供准确、可靠的数据支持。
Kimi-K2.5Kimi K2.5 是一款开源的原生多模态智能体模型,它在 Kimi-K2-Base 的基础上,通过对约 15 万亿混合视觉和文本 tokens 进行持续预训练构建而成。该模型将视觉与语言理解、高级智能体能力、即时模式与思考模式,以及对话式与智能体范式无缝融合。Python00
GLM-4.7-FlashGLM-4.7-Flash 是一款 30B-A3B MoE 模型。作为 30B 级别中的佼佼者,GLM-4.7-Flash 为追求性能与效率平衡的轻量化部署提供了全新选择。Jinja00
VLOOKVLOOK™ 是优雅好用的 Typora/Markdown 主题包和增强插件。 VLOOK™ is an elegant and practical THEME PACKAGE × ENHANCEMENT PLUGIN for Typora/Markdown.Less00
PaddleOCR-VL-1.5PaddleOCR-VL-1.5 是 PaddleOCR-VL 的新一代进阶模型,在 OmniDocBench v1.5 上实现了 94.5% 的全新 state-of-the-art 准确率。 为了严格评估模型在真实物理畸变下的鲁棒性——包括扫描伪影、倾斜、扭曲、屏幕拍摄和光照变化——我们提出了 Real5-OmniDocBench 基准测试集。实验结果表明,该增强模型在新构建的基准测试集上达到了 SOTA 性能。此外,我们通过整合印章识别和文本检测识别(text spotting)任务扩展了模型的能力,同时保持 0.9B 的超紧凑 VLM 规模,具备高效率特性。Python00
KuiklyUI基于KMP技术的高性能、全平台开发框架,具备统一代码库、极致易用性和动态灵活性。 Provide a high-performance, full-platform development framework with unified codebase, ultimate ease of use, and dynamic flexibility. 注意:本仓库为Github仓库镜像,PR或Issue请移步至Github发起,感谢支持!Kotlin07
compass-metrics-modelMetrics model project for the OSS CompassPython00