首页
/ Apache RocketMQ 5.3.3版本发布:性能优化与功能增强

Apache RocketMQ 5.3.3版本发布:性能优化与功能增强

2025-06-01 12:59:34作者:丁柯新Fawn

项目简介

Apache RocketMQ是一个分布式消息和流处理平台,具有低延迟、高性能、高可靠性、万亿级容量和灵活的可扩展性等特点。它广泛应用于金融、电商、物流、IoT等领域的异步通信、应用解耦、流量削峰等场景。

版本亮点

RocketMQ 5.3.3版本是一个重要的维护版本,主要包含性能优化、稳定性提升和功能增强。该版本不再支持"ACL 1.0"相关功能,全面转向"ACL 2.0"版本,同时修复了多个关键问题。

核心改进

存储层优化

  1. 分层存储增强:优化了分层存储中的消息查询逻辑,确保首次查询时能正确选择索引文件。改进了基于时间的消息偏移量查询性能,修复了时间边界计算问题。

  2. 消费队列改进:RocksDBConsumeQueueStore不再需要更新StoreCheckpoint,减少了不必要的I/O操作。同时优化了消费模式下的数据写入,避免脏数据问题。

  3. 存储检查点优化:移除了StoreCheckpoint中的重复刷新操作,提升了存储效率。

消费端增强

  1. POP消费模式:支持初始化偏移量模式配置,修复了消费偏移量更新问题。当消息被过滤时,能正确处理消费偏移量更新。

  2. 消费统计优化:定期清理StatsItemSet中的非活跃项,减少内存占用。SQL92过滤的消息现在会被正确统计。

生产端改进

  1. 消息重试机制:确保在Broker无响应时仍有重试机会,提高了消息发送的可靠性。

  2. 批量消息兼容:代理层(Proxy)现在能更好地处理批量消息,提升了兼容性。

系统稳定性

  1. 异常处理增强:PullMessageService线程现在会捕获所有Throwable异常,避免线程意外终止。客户端跟踪线程现在可以正确关闭。

  2. 资源清理:Broker下线时确保所有服务正确关闭。新增定时清理任务,自动维护系统资源。

  3. 内存保护:优化queryMessage方法,防止因大消息查询导致OOM问题。

功能变更

ACL安全升级

  1. 完全移除了ACL 1.0相关功能,全面转向ACL 2.0版本,提供了更强大和灵活的安全控制能力。

系统管理增强

  1. 主题管理:在queryTopicConsumeByWho命令中增加了topic-group映射信息,便于管理。

  2. 生产者管理:支持禁用生产者注册和快速通道关闭功能,提供了更灵活的资源控制。

  3. 系统主题创建:确保在'systemTopicClusterName'集群中的所有Broker上创建系统主题。

监控与日志

  1. 水位线打印优化:改进了BrokerController#printWaterMark方法的日志输出,提供更清晰的信息。

  2. TLS日志优化:优化了TLS相关的日志输出,便于问题排查。

  3. 跟踪数据增强:SendMessageContext现在包含消息类型信息,便于跟踪分析。

性能指标

  1. 主题状态监控:TopicStatusSubCommand现在支持输出主题的TPS(每秒事务数)指标。

  2. 消费延迟监控:当pullMessage溢出时,会刷新recordDiskFallBehind数据,提供更准确的延迟指标。

兼容性说明

  1. 该版本与之前版本保持二进制兼容,但完全移除了ACL 1.0功能,使用旧版本ACL配置的用户需要迁移到ACL 2.0。

  2. 配置文档已更新,确保与RocketMQ 5.x版本的兼容性。

总结

Apache RocketMQ 5.3.3版本在稳定性、性能和功能方面都有显著提升,特别是在存储层优化、消费模式增强和安全管理方面做出了重要改进。这些变化使得RocketMQ在大规模消息处理场景下更加可靠和高效。建议所有用户升级到此版本以获得更好的使用体验和更强的功能支持。

登录后查看全文
热门项目推荐
相关项目推荐

项目优选

收起
docsdocs
OpenHarmony documentation | OpenHarmony开发者文档
Dockerfile
149
1.95 K
kernelkernel
deepin linux kernel
C
22
6
openHiTLSopenHiTLS
旨在打造算法先进、性能卓越、高效敏捷、安全可靠的密码套件,通过轻量级、可剪裁的软件技术架构满足各行业不同场景的多样化要求,让密码技术应用更简单,同时探索后量子等先进算法创新实践,构建密码前沿技术底座!
C
980
395
ohos_react_nativeohos_react_native
React Native鸿蒙化仓库
C++
192
274
RuoYi-Vue3RuoYi-Vue3
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
931
555
openGauss-serveropenGauss-server
openGauss kernel ~ openGauss is an open source relational database management system
C++
145
190
nop-entropynop-entropy
Nop Platform 2.0是基于可逆计算理论实现的采用面向语言编程范式的新一代低代码开发平台,包含基于全新原理从零开始研发的GraphQL引擎、ORM引擎、工作流引擎、报表引擎、规则引擎、批处理引引擎等完整设计。nop-entropy是它的后端部分,采用java语言实现,可选择集成Spring框架或者Quarkus框架。中小企业可以免费商用
Java
8
0
金融AI编程实战金融AI编程实战
为非计算机科班出身 (例如财经类高校金融学院) 同学量身定制,新手友好,让学生以亲身实践开源开发的方式,学会使用计算机自动化自己的科研/创新工作。案例以量化投资为主线,涉及 Bash、Python、SQL、BI、AI 等全技术栈,培养面向未来的数智化人才 (如数据工程师、数据分析师、数据科学家、数据决策者、量化投资人)。
Jupyter Notebook
75
66
openHiTLS-examplesopenHiTLS-examples
本仓将为广大高校开发者提供开源实践和创新开发平台,收集和展示openHiTLS示例代码及创新应用,欢迎大家投稿,让全世界看到您的精巧密码实现设计,也让更多人通过您的优秀成果,理解、喜爱上密码技术。
C
65
518
CangjieCommunityCangjieCommunity
为仓颉编程语言开发者打造活跃、开放、高质量的社区环境
Markdown
1.11 K
0