Bitnami MongoDB Chart中节点调度问题的分析与解决

问题背景

在使用Bitnami MongoDB Chart(版本16.5.1)部署MongoDB集群时，用户遇到了节点调度问题。具体表现为：尽管配置了节点亲和性(nodeAffinity)和节点选择器(nodeSelector)规则，MongoDB Pod仍然尝试调度到控制平面节点(control-plane)，而未能正确调度到工作节点(worker nodes)。

问题现象

用户尝试了多种调度配置方式：

1. 节点亲和性配置：

affinity:
  nodeAffinity:
    requiredDuringSchedulingIgnoredDuringExecution:
      nodeSelectorTerms:
      - matchExpressions:
        - key: node-role.kubernetes.io/control-plane
          operator: DoesNotExist

2. 节点选择器配置：

nodeSelector:
  node-role.kubernetes.io/worker:

3. 自定义标签选择器：

nodeSelector:
  foo: "bar"

然而，所有这些配置都未能生效，Pod调度失败并显示错误信息："0/4 nodes are available: 1 node(s) were unschedulable"。

问题诊断

经过进一步分析，发现问题的根源在于：

1. 控制平面节点缺少污点(taint)：最初控制平面节点仅被标记为不可调度(SchedulingDisabled)，但缺少相应的污点配置。这导致调度器仍会考虑该节点。

2. 污点与容忍度不匹配：在添加控制平面污点后，错误信息变为"0/4 nodes are available: 1 node(s) had untolerated taint"，这表明Pod没有配置容忍度来容忍控制平面节点的污点。

3. 调度器行为理解：即使配置了反亲和性规则，调度器仍会评估所有节点(包括不符合条件的节点)，然后排除不满足条件的节点。因此看到"0/4"并不意味着调度器只考虑了控制平面节点。

解决方案

1. 正确配置控制平面节点

首先确保控制平面节点正确配置了污点：

kubectl taint nodes cp01 node-role.kubernetes.io/control-plane:NoSchedule

2. 验证节点标签

确保工作节点有正确的标签：

kubectl label nodes wk01 node-role.kubernetes.io/worker=
kubectl label nodes wk02 node-role.kubernetes.io/worker=
kubectl label nodes wk03 node-role.kubernetes.io/worker=

3. 推荐配置方案

方案一：使用节点选择器(nodeSelector)

nodeSelector:
  node-role.kubernetes.io/worker: ""

方案二：使用节点亲和性(nodeAffinity)

affinity:
  nodeAffinity:
    requiredDuringSchedulingIgnoredDuringExecution:
      nodeSelectorTerms:
      - matchExpressions:
        - key: node-role.kubernetes.io/worker
          operator: Exists

方案三：自定义标签选择

nodeSelector:
  foo: "bar"

4. 验证调度配置

使用以下命令验证Pod的调度配置是否生效：

kubectl get po -o custom-columns=NAME:.metadata.name,AFFINITIES:.spec.affinity,NODE_SELECTOR:.spec.nodeSelector

其他可能影响调度的因素

1. 资源限制：确保工作节点有足够的CPU和内存资源
2. PodDisruptionBudget：检查是否设置了Pod中断预算限制
3. 资源配额：命名空间可能有资源配额限制
4. 其他污点：工作节点可能有其他污点阻止调度

最佳实践建议

1. 为不同工作负载类型的工作节点使用专用标签
2. 结合使用污点和容忍度来控制Pod调度
3. 在生产环境中考虑使用Pod反亲和性(podAntiAffinity)来提高MongoDB实例的分布性
4. 使用资源请求和限制确保Pod能够被调度

通过以上分析和解决方案，可以有效地控制Bitnami MongoDB Chart在Kubernetes集群中的调度行为，确保MongoDB实例运行在预期的工作节点上。