spock:多主复制与冲突解决
项目介绍
spock 是一个为 PostgreSQL 14+ 提供多主复制及冲突解决功能的扩展。它基于 pgLogical 和 BDR2 项目构建,旨在为用户提供一个企业级的解决方案。spock 的核心功能是支持多主复制,并能够在不同节点间自动解决数据冲突,保证数据一致性。
项目技术分析
spock 扩展在 PostgreSQL 的基础上,增加了多主复制和冲突解决的关键能力。通过并行槽的实现,它能够支持混合的在线事务处理(OLTP)工作负载。此外,它还支持多种数据类型的 delta_apply 列,以实现冲突避免。
当前版本 4.0 的主要技术改进包括:
- 对并行槽的实现进行了全面重构,以支持混合的 OLTP 工作负载。
- 改进了 delta_apply 列的支持,以兼容更多数据类型。
- 增加了大量的回归测试覆盖。
- 支持 PostgreSQL 17beta 的逻辑复制。
- 支持自动复制 DDL 语句。
项目技术应用场景
spock 的技术应用场景广泛,包括但不限于以下几种情况:
- 异步多活动复制,支持冲突解决。
- 在主要版本之间进行升级。
- 完整的数据库复制。
- 使用复制集选择性地复制一组表。
- 选择性地在发布端或订阅端复制表行(row_filter)。
- 选择性地复制分区表。
- 在发布端选择性地复制表列。
- 从多个上游服务器收集/合并数据。
spock 的架构特点如下:
- 在数据库级别而非服务器级别上工作,与物理流复制不同。
- 一个提供者可以向多个订阅者发送数据,而不增加额外的磁盘写入开销。
- 一个订阅者能够合并来自多个源的变化,并能自动检测和配置冲突解决。
项目特点
spock 项目的特点可以概括为以下几点:
高度灵活的冲突解决
spock 通过 delta_apply 列支持冲突避免,它不依赖于特定的数据类型,适用于任何数值数据类型。这使得 spock 能够解决像银行账户余额这样的运行总和问题,即使两个节点上的事务发生冲突,也能够自动调整数据,以保持一致性。
支持分区表的复制
spock 支持分区表的复制,这为地理分片提供了便利。在复制分区表时,spock 可以同步现有分区,并在需要时添加新分区。此外,分区表还支持 row_filter,使得复制更加灵活。
自动复制 DDL 语句
spock 提供了自动复制 DDL 语句的功能,这意味着在配置正确的情况下,数据库模式的更改可以自动同步到所有节点。这大大简化了多节点数据库环境的维护工作。
Snowflake 序列支持
spock 支持 Snowflake 序列,这是一种在分布式集群中生成全局唯一 ID 的解决方案。它允许在多个 PostgreSQL 实例中共享同一个序列,确保生成的 ID 是唯一的。
强大的监控和管理
spock 提供了丰富的监控和管理统计信息,使得数据库管理员能够更好地监控复制状态和性能,及时处理可能出现的问题。
改进的故障转移支持
spock 通过集成 pg_failover_slots 扩展,提供了原生的故障转移槽支持,使得系统在故障发生时能够更快地恢复。
spock 的这些特点使其成为处理复杂多主复制场景的理想选择,为 PostgreSQL 用户提供了强大的数据一致性和高可用性保障。无论是地理分布式的应用,还是需要高可用性的企业级应用,spock 都能够提供可靠的支持。随着其功能的不断完善,spock 无疑会成为 PostgreSQL 社区中备受瞩目的项目之一。
atomcodeClaude Code 的开源替代方案。连接任意大模型,编辑代码,运行命令,自动验证 — 全自动执行。用 Rust 构建,极致性能。 | An open-source alternative to Claude Code. Connect any LLM, edit code, run commands, and verify changes — autonomously. Built in Rust for speed. Get StartedRust078- DDeepSeek-V4-ProDeepSeek-V4-Pro(总参数 1.6 万亿,激活 49B)面向复杂推理和高级编程任务,在代码竞赛、数学推理、Agent 工作流等场景表现优异,性能接近国际前沿闭源模型。Python00
MiniMax-M2.7MiniMax-M2.7 是我们首个深度参与自身进化过程的模型。M2.7 具备构建复杂智能体应用框架的能力,能够借助智能体团队、复杂技能以及动态工具搜索,完成高度精细的生产力任务。Python00
GLM-5.1GLM-5.1是智谱迄今最智能的旗舰模型,也是目前全球最强的开源模型。GLM-5.1大大提高了代码能力,在完成长程任务方面提升尤为显著。和此前分钟级交互的模型不同,它能够在一次任务中独立、持续工作超过8小时,期间自主规划、执行、自我进化,最终交付完整的工程级成果。Jinja00
Kimi-K2.6Kimi K2.6 是一款开源的原生多模态智能体模型,在长程编码、编码驱动设计、主动自主执行以及群体任务编排等实用能力方面实现了显著提升。Python00
Hy3-previewHy3 preview 是由腾讯混元团队研发的2950亿参数混合专家(Mixture-of-Experts, MoE)模型,包含210亿激活参数和38亿MTP层参数。Hy3 preview是在我们重构的基础设施上训练的首款模型,也是目前发布的性能最强的模型。该模型在复杂推理、指令遵循、上下文学习、代码生成及智能体任务等方面均实现了显著提升。Python00