Apache Doris在Kubernetes上部署FE节点的配置指南

前言

Apache Doris作为一款高性能的MPP分析型数据库，在存算分离架构下，FE（Frontend）节点承担着查询解析、规划等关键任务。本文将详细介绍在Kubernetes环境中部署和配置FE节点的最佳实践。

FE节点基础配置

计算资源配置

在Kubernetes环境中，我们可以通过requests和limits为FE节点分配计算资源。以下是一个典型的生产环境配置示例：

spec:
  feSpec:
    requests:
      cpu: 8
      memory: 8Gi
    limits:
      cpu: 8
      memory: 8Gi

这个配置为FE节点分配了8个CPU核心和8GB内存。在实际部署时，建议根据以下因素调整资源配置：

1. 集群规模：节点数量越多，单个FE节点负载可能越低
2. 查询复杂度：复杂查询需要更多内存
3. 并发量：高并发场景需要更多CPU资源

自定义启动配置

创建ConfigMap

FE节点的启动配置通过Kubernetes ConfigMap管理。以下是一个推荐的配置模板：

apiVersion: v1
kind: ConfigMap
metadata:
  name: fe-configmap
  namespace: default
  labels:
    app.kubernetes.io/component: fe
data:
  fe.conf: |
    CUR_DATE=`date +%Y%m%d-%H%M%S`
    LOG_DIR = ${DORIS_HOME}/log
    # JDK 17配置
    JAVA_OPTS_FOR_JDK_17="-Djavax.security.auth.useSubjectCredsOnly=false -Xmx8192m -Xms8192m -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=$LOG_DIR -Xlog:gc*:$LOG_DIR/fe.gc.log.$CUR_DATE:time,uptime:filecount=10,filesize=50M --add-opens=java.base/java.nio=ALL-UNNAMED --add-opens java.base/jdk.internal.ref=ALL-UNNAMED"
    sys_log_level = INFO
    sys_log_mode = NORMAL
    http_port = 8030
    rpc_port = 9020
    query_port = 9030
    edit_log_port = 9010
    enable_fqdn_mode=true

关键配置说明

1. JVM参数：-Xmx和-Xms设置为相同值避免动态调整开销
2. 日志配置：gc日志按时间和大小滚动，便于问题排查
3. 端口配置：确保各服务端口不冲突
4. FQDN模式：在K8s环境中必须设置为true

访问配置详解

Apache Doris在Kubernetes中支持三种服务暴露方式：

1. ClusterIP模式（默认）

适用于集群内部访问，配置简单：

kubectl -n doris get svc

输出示例：

NAME                              TYPE        CLUSTER-IP    EXTERNAL-IP   PORT(S)                               AGE
doriscluster-sample-fe-internal   ClusterIP   None          <none>        9030/TCP                              14m
doriscluster-sample-fe            ClusterIP   10.1.118.16   <none>        8030/TCP,9020/TCP,9030/TCP,9010/TCP   14m

2. NodePort模式

适用于开发测试环境，支持静态和动态端口分配：

spec:
  feSpec:
    service:
      type: NodePort
      portMaps:
      - nodePort: 31001  # 静态分配HTTP端口
        targetPort: 8030
      - nodePort: 31002  # 静态分配查询端口
        targetPort: 9030

3. LoadBalancer模式

适用于生产环境，云厂商提供负载均衡：

spec:
  feSpec:
    service:
      type: LoadBalancer
      annotations:
        service.beta.kubernetes.io/load-balancer-type: "external"

持久化存储配置

自动模板配置

spec:
  feSpec:
    persistentVolumes:
    - persistentVolumeClaimSpec:
        accessModes:
          - ReadWriteOnce
        resources:
          requests:
            storage: 200Gi

自定义挂载点

spec:
  feSpec:
    persistentVolumes:
    - mountPaths:
      - /opt/apache-doris/fe/log
      persistentVolumeClaimSpec:
        accessModes:
          - ReadWriteOnce
        resources:
          requests:
            storage: 300Gi

最佳实践建议

1. 生产环境：推荐使用LoadBalancer+持久化存储
2. 资源规划：预留20%的资源余量应对峰值负载
3. 监控配置：确保配置了HeapDumpPath以便内存问题排查
4. 日志管理：生产环境建议开启日志持久化

通过以上配置，您可以在Kubernetes环境中高效部署和管理Apache Doris的FE节点，为上层应用提供稳定的查询服务。