Apache Doris 查询统计信息分析：SHOW QUERY STATS 详解

概述

在数据库性能优化和查询分析中，了解历史查询对表和列的访问模式至关重要。Apache Doris 提供了 SHOW QUERY STATS 命令，用于展示历史查询对数据库表和列的命中情况。本文将深入解析这一功能的使用方法、应用场景和实际案例。

命令语法

SHOW QUERY STATS [ { [FOR <db_name>] | [FROM <table_name>] } ] [ALL] [VERBOSE];

参数详解

1. 作用范围参数

• FOR <db_name>：指定要查询的数据库名称，显示该数据库下所有表的查询统计信息
• FROM <table_name>：指定要查询的表名称，显示该表的查询统计信息

2. 显示模式参数

• ALL：显示所有索引的匹配信息（仅适用于表查询）
• VERBOSE：显示详细的匹配信息（仅适用于表查询）

这两个参数可以单独使用，也可以组合使用，但必须放在命令的最后位置。

权限要求

执行此命令需要至少具备以下权限：

权限类型	作用对象	说明
SELECT_PRIV	DATABASE	对查询的数据库需有SELECT权限

功能特点

1. 统计范围：统计历史查询对数据库表和列的访问情况
2. 数据持久性：统计信息在FE重启后会重置，且每个FE节点独立收集统计信息
3. 统计指标：
   • QueryCount：列被查询的次数
   • FilterCount：列在WHERE条件中被使用的次数
4. 默认行为：当不指定数据库时，显示所有数据库的查询命中情况

使用场景

1. 数据库性能优化

通过分析哪些列被频繁查询，可以优化表结构设计，将热点列放在合适的位置。

2. 索引设计参考

FilterCount高的列适合创建索引，可以显著提升查询性能。

3. 查询模式分析

了解业务查询的特征，为系统资源分配和参数调优提供依据。

实际案例解析

案例1：查看表的查询统计

SHOW QUERY STATS FROM baseall;

执行结果示例：

+-------+------------+-------------+
| Field | QueryCount | FilterCount |
+-------+------------+-------------+
| k0    | 1          | 0           |
| k1    | 1          | 0           |
| k2    | 1          | 0           |
| k3    | 1          | 0           |
| k9    | 1          | 1           |
| ...   | ...        | ...         |
+-------+------------+-------------+

分析：可以看到k0-k3列被查询过1次，k9列不仅被查询过，还被用作过滤条件1次。

案例2：查看数据库的查询统计

SHOW QUERY STATS FOR test_query_db;

执行结果示例：

+----------------------------+------------+
| TableName                  | QueryCount |
+----------------------------+------------+
| baseall                    | 1          |
| other_table                | 0          |
+----------------------------+------------+

分析：该数据库中只有baseall表被查询过1次。

案例3：使用ALL和VERBOSE参数

SHOW QUERY STATS FROM baseall ALL VERBOSE;

执行结果示例：

+-----------+-------+------------+-------------+
| IndexName | Field | QueryCount | FilterCount |
+-----------+-------+------------+-------------+
| baseall   | k0    | 1          | 0           |
|           | k1    | 1          | 0           |
|           | ...   | ...        | ...         |
+-----------+-------+------------+-------------+

分析：这种显示方式既包含索引信息，也包含每个字段的详细查询统计。

最佳实践建议

1. 定期分析：建议定期执行此命令，了解查询模式的变化
2. 结合EXPLAIN使用：分析查询统计后，可结合EXPLAIN进一步优化查询
3. 关注高频列：对QueryCount高的列考虑优化存储方式
4. 关注过滤列：对FilterCount高的列考虑添加合适的索引
5. 多维度分析：可以按时间维度收集统计信息，分析查询模式的变化趋势

注意事项

1. 统计信息仅在FE节点内存中保存，重启后会丢失
2. 统计信息是累计值，无法按时间范围筛选
3. 在多FE环境中，每个FE节点维护自己的统计信息

通过合理使用SHOW QUERY STATS命令，Doris用户可以深入了解查询特征，为数据库优化提供数据支持，从而提升整体系统性能。