Apache Doris 计算组(Compute Group)工作机制详解

计算组概念与架构原理

计算组(Compute Group)是Apache Doris在存算分离架构中实现不同工作负载物理隔离的核心机制。其核心思想如下图所示：

计算组架构具有以下关键特性：

1. 节点组织方式：一个或多个BE节点可以组成一个计算组
2. 无状态设计：BE节点本地无状态，所有数据存储在共享存储中
3. 共享存储访问：多个计算组通过共享存储访问同一份数据

计算组与传统资源组的对比优势

相比传统的资源组(Resource Group)，计算组具有以下显著优势：

对比维度	计算组	传统资源组
成本效益	存储与计算分离，不增加存储成本	需要维护多副本，存储成本高
扩展性	动态增减无需数据迁移	扩容需复杂的数据迁移过程
隔离性	BE节点故障不影响数据可用性	BE节点故障可能导致数据加载失败
灵活性	新计算组只需查询时预热缓存	新节点需要完整数据副本

注意：在3.0.2版本之前，计算组被称为计算集群(Compute Cluster)

计算组管理操作指南

查看计算组

使用SHOW COMPUTE GROUPS命令查看当前仓库中的所有计算组。根据用户权限不同，返回结果会有差异：

• ADMIN权限用户：查看所有计算组
• 普通用户：仅查看有使用权限(USAGE_PRIV)的计算组
• 无权限用户：返回空结果

SHOW COMPUTE GROUPS;

添加计算组

管理计算组需要OPERATOR权限（默认仅root账户拥有）。添加BE节点并分配到计算组：

-- 添加到指定计算组
ALTER SYSTEM ADD BACKEND 'host:9050' PROPERTIES ("tag.compute_group_name" = "new_group");

-- 添加到默认计算组(default_compute_group)
ALTER SYSTEM ADD BACKEND 'host:9050';

权限管理

授权计算组使用权限（需ADMIN权限或admin角色）：

GRANT USAGE_PRIV ON COMPUTE GROUP {compute_group_name} TO {user}

撤销计算组使用权限：

REVOKE USAGE_PRIV ON COMPUTE GROUP {compute_group_name} FROM {user}

默认计算组设置

设置当前用户的默认计算组（需已有该计算组使用权限）：

SET PROPERTY 'default_compute_group' = '{clusterName}';

设置其他用户的默认计算组（需ADMIN权限）：

SET PROPERTY FOR {user} 'default_compute_group' = '{clusterName}';

查看计算组设置：

-- 查看当前用户设置
SHOW PROPERTY;

-- 查看其他用户设置（需ADMIN权限）
SHOW PROPERTY FOR {user};

计算组切换

在会话中动态切换计算组：

-- 指定数据库和计算组
USE { [catalog_name.]database_name[@compute_group_name] | @compute_group_name }

-- 示例：切换到test_db数据库并使用cg1计算组
USE test_db@cg1;

-- 示例：仅切换计算组（保持当前数据库）
USE @cg2;

注意：若数据库或计算组名称包含保留字，需使用反引号``包裹

计算组扩容与缩容

通过以下命令动态调整计算组规模：

-- 扩容：添加BE节点
ALTER SYSTEM ADD BACKEND 'new_host:9050' PROPERTIES ("tag.compute_group_name" = "target_group");

-- 缩容：下线BE节点
ALTER SYSTEM DECOMMISSION BACKEND 'old_host:9050';

最佳实践与注意事项

1. 权限规划：建议为不同业务团队创建专属计算组，并通过GRANT/REVOKE精细控制访问权限

2. 默认计算组：为每个用户设置合理的默认计算组，避免操作错误

3. 资源隔离：将ETL、报表、即席查询等不同负载分配到独立计算组

4. 监控扩容：新增计算组后，监控缓存命中率，待稳定后再接入生产流量

5. 命名规范：采用业务线_负载类型的命名规则（如ads_report、dws_etl）

通过合理使用计算组，可以在存算分离架构下实现资源的高效利用与工作负载的强隔离，为Apache Doris的多租户管理提供强大支持。