Apache RocketMQ 5.3.3版本发布:稳定性提升与功能优化
项目简介
Apache RocketMQ是一个分布式消息和流处理平台,具有低延迟、高性能、高可靠性、万亿级容量和灵活的可扩展性等特点。它广泛应用于金融、电商、物流等多个领域,支持多种消息模式如发布/订阅、消息队列、事务消息等。
版本概览
RocketMQ 5.3.3版本是一个重要的维护版本,主要聚焦于系统稳定性和性能优化。该版本最显著的变化是移除了对"ACL 1.0"的支持,全面转向更安全的"ACL 2.0"认证机制。同时,版本还包含了多个关键问题的修复和改进,涉及存储层、消费模式、消息查询等多个核心模块。
核心改进
存储层优化
-
分层存储增强:修复了在分层存储中查询消息时可能选择错误索引文件的问题,优化了时间边界计算逻辑,确保查询结果的准确性。同时改进了异步获取队列偏移量的性能,提升了冷数据读取的控制能力。
-
RocksDB存储改进:针对RocksDBConsumeQueueStore进行了优化,移除了不必要的StoreCheckpoint更新操作,减少了IO开销。
-
消费队列管理:修复了消费模式中可能写入脏数据的问题,确保消费偏移量的正确性。同时优化了消费队列索引的删除顺序,在分层存储中先删除ConsumeQueue索引再删除CommitLog,避免潜在的数据不一致。
消费模式改进
-
POP消费服务增强:支持初始化偏移量模式的配置,修复了重置偏移量时提交拉取偏移量的问题,确保消费进度管理的准确性。
-
消息过滤统计:现在当使用SQL92过滤消息时,系统会正确统计被过滤的消息数量,为监控提供更全面的数据。
-
系统订阅组限制:增加了对系统订阅组创建的限制,并添加了拉取请求拒绝策略,防止滥用系统资源。
消息投递可靠性
-
重试机制完善:确保在Broker无响应时仍有机会发送重试消息,提高了消息投递的可靠性。
-
投递偏移量修复:修正了投递失败时投递设置中起始偏移量不正确的问题,避免后续投递出现偏差。
-
批量消息兼容:代理层现在更好地兼容批量消息处理,提升了批量消息场景下的稳定性。
监控与管理增强
-
统计项清理:实现了StatsItemSet中非活跃项的定期清理机制,避免内存泄漏。
-
主题状态监控:在TopicStatusSubCommand中增加了主题写入TPS的输出,便于运维监控。
-
消费查询增强:在queryTopicConsumeByWho命令中添加了主题组映射信息,便于排查消费关系。
稳定性提升
-
线程安全:修复了PullMessageService线程中可能未捕获Throwable的问题,增强了线程稳定性。
-
服务关闭:确保在Broker下线时正确关闭所有相关服务,避免资源泄漏。
-
跟踪数据:修复了在立即关闭生产者时可能无法发送跟踪数据的问题。
-
内存保护:优化了queryMessage方法的实现,防止在处理大查询时导致OOM。
配置与文档
-
配置更新:更新了5.x版本的兼容性配置文档,帮助用户平滑升级。
-
快速入门:同步更新了README中的快速入门版本信息。
-
日志优化:优化了TLS相关的日志输出,便于问题排查。
总结
RocketMQ 5.3.3版本虽然没有引入重大新功能,但在系统稳定性、性能优化和运维体验方面做出了显著改进。特别是全面转向ACL 2.0认证机制,为系统安全性提供了更好保障。对于生产环境用户,建议评估升级此版本以获得更好的稳定性和性能表现。开发者在升级时需要注意ACL配置的调整,并充分测试新版本在特定场景下的表现。
cherry-studio
🍒 Cherry Studio 是一款支持多个 LLM 提供商的桌面客户端TypeScript037RuoYi-Vue3
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统Vue0403arkanalyzer
方舟分析器:面向ArkTS语言的静态程序分析框架TypeScript040GitCode百大开源项目
GitCode百大计划旨在表彰GitCode平台上积极推动项目社区化,拥有广泛影响力的G-Star项目,入选项目不仅代表了GitCode开源生态的蓬勃发展,也反映了当下开源行业的发展趋势。02CS-Books
🔥🔥超过1000本的计算机经典书籍、个人笔记资料以及本人在各平台发表文章中所涉及的资源等。书籍资源包括C/C++、Java、Python、Go语言、数据结构与算法、操作系统、后端架构、计算机系统知识、数据库、计算机网络、设计模式、前端、汇编以及校招社招各种面经~01openGauss-server
openGauss kernel ~ openGauss is an open source relational database management systemC++0145
热门内容推荐
最新内容推荐
项目优选









