Higress项目配置OpenTelemetry追踪时的问题分析与解决方案
问题背景
在使用Higress项目时,当尝试将追踪系统配置为OpenTelemetry时,发现higress-controller组件报错"skywalking service and port can not be empty"。这个问题源于Higress的追踪配置验证逻辑存在缺陷,导致即使明确指定了OpenTelemetry配置,系统仍然强制要求Skywalking配置。
问题分析
Higress的追踪配置验证逻辑中存在一个关键问题:在验证函数中,无论用户是否配置了Skywalking,只要Skywalking结构体不为空,就会触发验证。而通过Helm安装时,默认的values.yaml中Skywalking配置虽然为空字符串,但结构体本身存在,导致验证逻辑始终要求Skywalking服务地址和端口不能为空。
具体验证逻辑如下:
- 首先检查超时(timeout)和采样率(sampling)参数是否合法
- 然后检查Zipkin、Skywalking和OpenTelemetry三种追踪后端的配置
- 最后要求三种后端配置中有且仅有一种被启用
问题出在Skywalking的验证上,即使没有实际配置Skywalking,只要结构体存在就会触发验证。
解决方案
要解决这个问题,需要修改Helm的values.yaml配置,将Skywalking配置显式设置为null,而不是留空。这样可以确保Skywalking结构体不存在,从而跳过验证。
正确的values.yaml配置示例:
higress-core:
tracing:
enable: true
opentelemetry:
service: jaeger-collector.default.svc.cluster.local
port: 4317
sampling: 100
skywalking: null
timeout: 500
安装命令:
helm install higress -n higress-system higress.io/higress --create-namespace \
--render-subchart-notes \
--set global.local=true \
--set global.o11y.enabled=false \
--set global.onlyPushRouteCluster=false \
-f values.yaml
注意事项
-
安装过程中可能会看到警告信息"warning: cannot overwrite table with non table for higress.higress-core.tracing.skywalking",这是Helm的正常行为,不影响功能。
-
如果使用Jaeger作为OpenTelemetry后端,可能需要将服务地址从"jaeger-collector"改为"ot-collector",因为Jaeger的OpenTelemetry接收器默认使用ot-collector服务名。
-
确保OpenTelemetry后端的服务地址和端口正确无误,并且网络可达。
总结
Higress项目的追踪配置验证逻辑在处理OpenTelemetry时存在缺陷,通过正确配置values.yaml文件可以绕过这个问题。这个问题展示了在使用开源项目时,理解其配置验证逻辑的重要性,以及如何通过调整配置来满足系统要求。对于开发者来说,这也提示了在设计配置验证时需要考虑各种边界情况,避免强制要求用户配置他们并不打算使用的功能。
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0187
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0112
Step-3.7-FlashStep-3.7-Flash是一个拥有 1980 亿参数的稀疏混合专家(MoE)视觉语言模型,由 1960 亿参数的语言主干网络和 18 亿参数的视觉编码器组合而成,具备原生图像理解能力。Python00
JoyAI-EchoJoyAI-Echo,这是一个独立的、仅用于推理的版本,旨在实现分钟级多镜头音视频生成。它采用了经过蒸馏的DMD生成器、配对的跨模态记忆以及故事级别的一致性。其性能的核心在于,一个跨模态视听记忆库能够在长达五分钟的视频中保持角色外观和语音音色的一致性。同时,一个训练后处理流程将基于记忆的强化学习与分布匹配蒸馏相结合,实现了7.5倍的速度提升,显著增强了视觉质量和对齐效果。00
omega-aiOmega-AI:基于java打造的深度学习框架,帮助你快速搭建神经网络,实现模型推理与训练,引擎支持自动求导,多线程与GPU运算,GPU支持CUDA,CUDNN。Java03
llm-universe本项目是一个面向小白开发者的大模型应用开发教程,在线阅读地址:https://datawhalechina.github.io/llm-universe/Jupyter Notebook08