Databend v1.2.702-nightly版本发布:对象存储RBAC支持与查询优化
2025-06-08 21:32:20作者:苗圣禹Peter
项目简介
Databend是一个开源的云原生数据仓库,采用Rust语言开发,具有高性能、弹性扩展和低成本等特点。它支持标准SQL语法,能够处理PB级别的数据分析任务,同时提供了与主流云存储服务的深度集成能力。
核心特性解析
对象存储RBAC支持
本次版本最重要的更新之一是为对象存储仓库添加了基于角色的访问控制(RBAC)功能。这意味着管理员现在可以:
- 对不同角色设置细粒度的对象存储访问权限
- 实现更安全的多租户数据隔离
- 精确控制用户对存储桶和对象的操作权限
这一特性特别适合企业级应用场景,可以有效防止数据越权访问问题。
元数据同步增强
开发团队对表结构变更时的元数据同步机制进行了优化:
- 现在当表被附加(attach)时,会自动同步表和字段的注释信息
- 支持半同步模式,在保证性能的同时确保元数据一致性
- 改进了表结构变更后的提示文件(hint file)重新生成逻辑
这些改进使得元数据管理更加可靠,特别是在数据迁移和表结构变更场景下。
查询功能增强
查询引擎方面有几个值得关注的改进:
- 新增
explain(DECORRELATED,verbose)语法,提供更详细的查询计划分析 - 增加了
show_roles表函数,方便管理员查看和管理角色信息 - 修复了TPC-DS基准测试中q69查询失败的问题
这些优化使得查询分析和管理更加便捷,特别是对于复杂查询的调优有很大帮助。
可靠性提升
Raft日志增强
分布式核心组件Raft日志系统得到了显著改进:
- 增强了日志可靠性,减少数据丢失风险
- 新增了兼容性测试,确保版本升级时的平滑过渡
- 优化了日志文件滚动策略,新增了最大文件大小配置
这些改进使得Databend的分布式存储引擎更加稳定可靠。
日志管理优化
日志系统新增了两个实用功能:
- 支持配置日志文件最大大小(log.file.max_size)
- 增加了日志滚动测试用例
- 优化了时间旅行(size_travel)相关的日志输出
这些改进使得系统日志更加易于管理和分析,特别是在生产环境长时间运行时。
文件格式支持扩展
数据导入导出功能得到了增强:
- CSV/TSV/NDJSON格式现在支持查询文件元数据
- 提供了更丰富的文件信息访问能力
- 增强了与外部数据源的集成能力
这使得用户能够更方便地处理各种结构化数据文件,特别是在数据湖场景下。
总结
Databend v1.2.702-nightly版本在安全性、可靠性和易用性方面都有显著提升。对象存储RBAC的引入使得企业级安全管控成为可能,而查询优化和元数据同步的改进则进一步提升了用户体验。Raft日志和日志系统的增强为大规模生产部署提供了更好的基础。
这个版本体现了Databend团队对产品稳定性和功能完整性的持续投入,为用户构建云原生数据分析平台提供了更强大的支持。特别是对于需要严格权限控制和元数据管理的企业用户,这个版本值得关注和评估。
登录后查看全文
热门项目推荐
相关项目推荐
Kimi-K2.5Kimi K2.5 是一款开源的原生多模态智能体模型,它在 Kimi-K2-Base 的基础上,通过对约 15 万亿混合视觉和文本 tokens 进行持续预训练构建而成。该模型将视觉与语言理解、高级智能体能力、即时模式与思考模式,以及对话式与智能体范式无缝融合。Python00
PaddleOCR-VL-1.5PaddleOCR-VL-1.5 是 PaddleOCR-VL 的新一代进阶模型,在 OmniDocBench v1.5 上实现了 94.5% 的全新 state-of-the-art 准确率。 为了严格评估模型在真实物理畸变下的鲁棒性——包括扫描伪影、倾斜、扭曲、屏幕拍摄和光照变化——我们提出了 Real5-OmniDocBench 基准测试集。实验结果表明,该增强模型在新构建的基准测试集上达到了 SOTA 性能。此外,我们通过整合印章识别和文本检测识别(text spotting)任务扩展了模型的能力,同时保持 0.9B 的超紧凑 VLM 规模,具备高效率特性。Python00
xw-cli实现国产算力大模型零门槛部署,一键跑通 Qwen、GLM-4.7、Minimax-2.1、DeepSeek-OCR 等模型Go06
yuanrongopenYuanrong runtime:openYuanrong 多语言运行时提供函数分布式编程,支持 Python、Java、C++ 语言,实现类单机编程高性能分布式运行。Go051
MiniCPM-SALAMiniCPM-SALA 正式发布!这是首个有效融合稀疏注意力与线性注意力的大规模混合模型,专为百万级token上下文建模设计。00
ebook-to-mindmapepub、pdf 拆书 AI 总结TSX01
项目优选
收起
deepin linux kernel
C
27
11
OpenHarmony documentation | OpenHarmony开发者文档
Dockerfile
541
3.77 K
Ascend Extension for PyTorch
Python
351
419
本项目是CANN提供的数学类基础计算算子库,实现网络在NPU上加速计算。
C++
889
615
openEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。
C
338
186
openJiuwen agent-studio提供零码、低码可视化开发和工作流编排,模型、知识库、插件等各资源管理能力
TSX
988
253
openGauss kernel ~ openGauss is an open source relational database management system
C++
169
233
暂无简介
Dart
778
194
华为昇腾面向大规模分布式训练的多模态大模型套件,支撑多模态生成、多模态理解。
Python
115
141
🎉 (RuoYi)官方仓库 基于SpringBoot,Spring Security,JWT,Vue3 & Vite、Element Plus 的前后端分离权限管理系统
Vue
1.35 K
759