Apache Doris GROUPING_ID函数详解:分组级别计算利器
概述
在数据分析领域,GROUP BY查询是我们最常用的操作之一。Apache Doris提供的GROUPING_ID函数是一个强大的聚合函数,它能够帮助我们识别GROUP BY查询结果中每一行的分组级别。本文将深入解析GROUPING_ID函数的工作原理、使用场景和实际应用。
GROUPING_ID函数原理
GROUPING_ID函数返回一个整数位图,表示在GROUP BY列表中哪些列没有被聚合到给定的输出行中。这个函数特别适用于配合ROLLUP、CUBE或GROUPING SETS等高级分组操作使用。
核心特性
- 位图表示:返回值为BIGINT类型,每一位代表一个分组列的状态
- 灵活应用:可在SELECT列表、HAVING或ORDER BY子句中使用
- 分组识别:精确识别当前行属于哪个分组级别
语法结构
GROUPING_ID(<column_expression> [, ...])
参数说明
| 参数名 | 描述 |
|---|---|
| column_expression | GROUP BY子句中的列表达式,可指定多个 |
实际应用案例
案例一:识别分组级别
SELECT
department,
CASE
WHEN GROUPING_ID(department, level) = 0 THEN level
WHEN GROUPING_ID(department, level) = 1 THEN CONCAT('Total: ', department)
WHEN GROUPING_ID(department, level) = 3 THEN 'Total: Company'
ELSE 'Unknown'
END AS `Job Title`,
COUNT(uid) AS `Employee Count`
FROM employee
GROUP BY ROLLUP(department, level)
ORDER BY GROUPING_ID(department, level) ASC;
执行结果分析:
- 当GROUPING_ID返回0时,表示department和level都参与了分组
- 返回1时,表示只有department参与了分组(level被聚合)
- 返回3时,表示两个列都被聚合(公司总计)
这种模式非常适合制作带有小计和总计的报表。
案例二:结果集过滤
SELECT
department,
CASE
WHEN GROUPING_ID(department, level) = 0 THEN level
WHEN GROUPING_ID(department, level) = 1 THEN CONCAT('Total: ', department)
WHEN GROUPING_ID(department, level) = 3 THEN 'Total: Company'
ELSE 'Unknown'
END AS `Job Title`,
COUNT(uid) AS `Count`
FROM employee
GROUP BY ROLLUP(department, level)
HAVING `Job Title` = 'Senior';
执行效果: 这个查询只返回那些具体到员工级别的记录(即GROUPING_ID=0且职位为"Senior"的记录),过滤掉了所有汇总行。
高级应用技巧
-
多级报表生成:结合ROLLUP和GROUPING_ID可以轻松生成包含部门小计和公司总计的多级报表
-
动态标签:通过CASE语句基于GROUPING_ID值动态生成行标签,使报表更易读
-
结果筛选:在HAVING子句中使用GROUPING_ID可以精确控制返回哪些级别的汇总数据
-
排序控制:在ORDER BY中使用GROUPING_ID可以确保汇总行出现在合适的位置
注意事项
-
GROUPING_ID的参数顺序会影响返回的位图值,必须与GROUP BY子句中的列顺序一致
-
对于包含多个分组列的复杂查询,建议先测试GROUPING_ID的返回值以确认分组级别
-
在大型数据集上使用ROLLUP等操作时要注意性能影响
总结
Apache Doris的GROUPING_ID函数为复杂的分组分析提供了强大的支持。通过理解其位图表示原理和掌握实际应用技巧,数据分析师可以更高效地制作各种汇总报表,实现数据的多维度分析。无论是简单的部门统计还是复杂的多级报表,GROUPING_ID都能提供清晰的分组级别标识,使数据分析工作更加得心应手。
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0191
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0118
Step-3.7-FlashStep-3.7-Flash是一个拥有 1980 亿参数的稀疏混合专家(MoE)视觉语言模型,由 1960 亿参数的语言主干网络和 18 亿参数的视觉编码器组合而成,具备原生图像理解能力。Python00
JoyAI-EchoJoyAI-Echo,这是一个独立的、仅用于推理的版本,旨在实现分钟级多镜头音视频生成。它采用了经过蒸馏的DMD生成器、配对的跨模态记忆以及故事级别的一致性。其性能的核心在于,一个跨模态视听记忆库能够在长达五分钟的视频中保持角色外观和语音音色的一致性。同时,一个训练后处理流程将基于记忆的强化学习与分布匹配蒸馏相结合,实现了7.5倍的速度提升,显著增强了视觉质量和对齐效果。00
fun-rec推荐系统入门教程,在线阅读地址:https://datawhalechina.github.io/fun-rec/Python03
so-large-lm大模型基础: 一文了解大模型基础知识01