Apache Pulsar 4.0.2版本中时间戳定位功能的异常行为分析
在Apache Pulsar 4.0.2版本中,用户报告了一个关于消息订阅定位功能的严重问题。当使用时间戳进行消息定位(seek)操作时,系统错误地将订阅位置重置到了主题的最早消息位置,而不是预期的目标时间戳之后的第一条消息位置。
这个问题的核心在于4.0.2版本引入的一个新特性变更。该变更原本是为了处理账本关闭时间戳与系统时钟偏差的问题,但在实际运行中却导致了seek操作的异常行为。具体表现为:当用户尝试通过指定时间戳来定位消息流中的特定位置时,系统没有正确地找到该时间戳之后的第一条可用消息,而是直接将读取位置回退到了整个主题的最开始处。
经过技术团队的深入分析,发现问题根源在于新引入的时钟偏差处理逻辑。在默认配置下,系统会尝试补偿账本关闭时间戳与系统时钟之间的偏差,但这种补偿机制在某些情况下会错误地触发订阅位置的完全重置。
对于遇到此问题的用户,目前提供了一个有效的临时解决方案:通过将配置项managedLedgerCursorResetLedgerCloseTimestampMaxClockSkewMillis设置为-1,可以禁用这项新功能,使系统恢复到4.0.1版本的行为模式。这个配置项需要手动添加到broker.conf文件中,因为它不是默认存在的配置参数。
在Kubernetes环境中部署的Pulsar集群,可以通过在Helm Chart的values.yaml文件中添加相应的配置来实现这一修改。具体做法是在broker配置部分的configData下添加PULSAR_PREFIX_managedLedgerCursorResetLedgerCloseTimestampMaxClockSkewMillis: "-1"这一项。
值得注意的是,这个问题在4.0.1版本中并不存在,且通过上述配置修改后,4.0.2版本也能正常工作。这表明问题确实是由新引入的功能变更引起的,而非其他底层机制的问题。
对于生产环境中依赖时间戳定位功能的用户,建议在升级到4.0.2版本时特别注意这个问题,并考虑应用上述解决方案。同时,用户也可以选择暂时回退到4.0.1版本,等待后续版本中该问题的正式修复。
kernelopenEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。C0131
let_datasetLET数据集 基于全尺寸人形机器人 Kuavo 4 Pro 采集,涵盖多场景、多类型操作的真实世界多任务数据。面向机器人操作、移动与交互任务,支持真实环境下的可扩展机器人学习00
mindquantumMindQuantum is a general software library supporting the development of applications for quantum computation.Python059
PaddleOCR-VLPaddleOCR-VL 是一款顶尖且资源高效的文档解析专用模型。其核心组件为 PaddleOCR-VL-0.9B,这是一款精简却功能强大的视觉语言模型(VLM)。该模型融合了 NaViT 风格的动态分辨率视觉编码器与 ERNIE-4.5-0.3B 语言模型,可实现精准的元素识别。Python00
GLM-4.7-FlashGLM-4.7-Flash 是一款 30B-A3B MoE 模型。作为 30B 级别中的佼佼者,GLM-4.7-Flash 为追求性能与效率平衡的轻量化部署提供了全新选择。Jinja00
AgentCPM-ReportAgentCPM-Report是由THUNLP、中国人民大学RUCBM和ModelBest联合开发的开源大语言模型智能体。它基于MiniCPM4.1 80亿参数基座模型构建,接收用户指令作为输入,可自主生成长篇报告。Python00