Fast DDS中DataReader::read()方法读取map类型数据的问题分析
2025-07-01 13:59:20作者:范靓好Udolf
问题背景
在使用Fast DDS进行数据通信时,开发者发现当消息类型包含map数据结构时,使用DataReader::read()方法读取数据会出现异常行为。具体表现为:后续接收到的消息会包含之前消息的数据内容,导致数据合并现象。
问题现象
当发布者依次发送两个消息:
- {0: "abc"}
- {1: "def"}
订阅者接收到的实际数据却是:
- {0: "abc"}
- {0: "abc", 1: "def"}
这种异常行为仅在消息类型包含map数据结构时出现,且仅在使用DataReader::read()方法时发生,而使用DataReader::read_next_sample()方法则表现正常。
技术分析
1. 数据读取机制差异
Fast DDS提供了两种主要的数据读取方式:
- read_next_sample(): 每次读取一个样本
- read(): 批量读取多个样本
根据官方文档,read_next_sample()在语义上等同于read()方法的特定参数配置。然而在实际使用中,两者对map类型数据的处理表现却存在差异。
2. 根本原因
深入分析发现,问题根源在于Fast DDS的SampleLoanManager机制和fast-cdr库的map反序列化实现:
-
SampleLoanManager问题:
- 当返回样本时,系统将样本项从used_loans_移动到free_loans_,但未重置样本数据
- 当重用样本时,直接对现有样本进行反序列化操作,导致map数据累积
-
fast-cdr反序列化问题:
- 在XCDRv2格式下,map反序列化前会调用clear()
- 但在普通CDR格式下,map反序列化前缺少clear()调用
- 导致新数据被emplace到现有map中而非替换
3. 解决方案比较
针对此问题,存在两种可能的修复方案:
方案一:修改SampleLoanManager
void return_loan(void* sample) {
// ...现有代码...
if (!is_plain_) {
item->sample = type_->createData();
}
// ...后续代码...
}
方案二:修改fast-cdr的map反序列化
Cdr& deserialize(std::map<_K, _T>& map_t) {
if (CdrVersion::XCDRv2 == cdr_version_) {
// ...现有代码...
} else {
map_t.clear(); // 添加clear调用
// ...现有代码...
}
}
技术建议
-
临时解决方案:
- 对于关键应用,可暂时使用read_next_sample()替代read()
- 在订阅端手动清除map数据后再处理
-
长期解决方案:
- 建议同时修复SampleLoanManager和fast-cdr的问题
- 在Fast DDS层面确保样本重用时的数据重置
- 在fast-cdr层面确保所有格式下map反序列化前都清除旧数据
-
最佳实践:
- 对于包含复杂数据结构(map/vector等)的类型
- 在IDL定义中考虑使用XCDRv2编码
- 在应用层做好数据验证
总结
这个问题揭示了分布式系统中数据序列化/反序列化的复杂性,特别是在重用内存和复杂数据结构处理时。开发者在设计消息类型和使用DDS API时,需要特别注意数据生命周期管理和内存重用可能带来的副作用。Fast DDS团队需要进一步完善其内存管理机制,确保数据一致性。
登录后查看全文
热门项目推荐
相关项目推荐
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust0218
cann-learning-hubCANN 学习中心仓,支持在线互动运行、边学边练,提供教程、示例与优化方案,一站式助力昇腾开发者快速上手。Jupyter Notebook0140
uni-appA cross-platform framework using Vue.jsJavaScript09
GLM-5.2智谱开源 GLM-5.2,这是针对长文本任务的最新旗舰模型。相较于前代产品 GLM-5.1,它在长文本任务处理能力上实现了显著飞跃,并且首次在稳定的 100 万 token 上下文中提供这一能力。Jinja00
SwanLab⚡️SwanLab - an open-source, modern-design AI training tracking and visualization tool. Supports Cloud / Self-hosted use. Integrated with PyTorch / Transformers / LLaMA Factory / veRL/ Swift / Ultralytics / MMEngine / Keras etc.Python00
tiny-universe《大模型白盒子构建指南》:一个全手搓的Tiny-UniverseJupyter Notebook03
热门内容推荐
最新内容推荐
项目优选
收起
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
471
466
deepin linux kernel
C
32
16
Claude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed.
Get Started
Rust
2.09 K
218
本项目是CANN提供的神经网络类计算算子库,实现网络在NPU上加速计算。
C++
700
1.4 K
暂无描述
Dockerfile
780
5.08 K
Ascend Extension for PyTorch
Python
758
968
本仓库是 Flutter SDK 与 Flutter Engine 的 OpenHarmony 适配版本,由 CPF-Flutter 团队维护。开发者可使用熟悉的 Flutter 技术栈开发 OpenHarmony 应用,3.35.7 及以后的适配版本可基于本仓库源码构建支持 OpenHarmony 的 Flutter Engine。
Dart
1.04 K
272
本项目是CANN提供的transformer类大模型算子库,实现网络在NPU上加速计算。
C++
880
2.02 K
MindQuantum is a general software library supporting the development of applications for quantum computation.
Python
183
112
旨在打造算法先进、性能卓越、高效敏捷、安全可靠的密码套件,通过轻量级、可剪裁的软件技术架构满足各行业不同场景的多样化要求,让密码技术应用更简单,同时探索后量子等先进算法创新实践,构建密码前沿技术底座!
C
1.11 K
682