AWS pgactive 项目快速入门:构建Active-Active PostgreSQL集群指南
前言
在现代分布式系统中,实现数据库的高可用性和读写分离是常见需求。AWS pgactive项目提供了一种创新的解决方案,能够在多个PostgreSQL实例之间建立Active-Active(双活)复制关系,使每个节点都能同时处理读写请求。本文将详细介绍如何使用pgactive快速搭建一个Active-Active PostgreSQL集群。
环境准备
在开始之前,您需要准备以下环境:
- 至少两个运行PostgreSQL 12或更高版本的实例
- 确保这些实例之间能够通过网络互相访问
- 确保每个实例的
shared_preload_libraries参数已包含pgactive
基础配置
1. 创建应用数据库
在每个PostgreSQL实例上执行以下命令创建应用数据库:
CREATE DATABASE app;
2. 记录实例网络端点
为方便后续操作,记录下两个PostgreSQL实例的网络端点地址,我们分别称之为endpoint1和endpoint2。
配置第一个节点(endpoint1)
1. 验证pgactive加载
首先确认pgactive已正确加载:
SELECT setting ~ 'pgactive'
FROM pg_catalog.pg_settings
WHERE name = 'shared_preload_libraries';
预期输出应为t(true)。
2. 创建测试表和初始数据
CREATE SCHEMA inventory;
CREATE TABLE inventory.products (
id uuid PRIMARY KEY DEFAULT gen_random_uuid(),
product_name text NOT NULL,
created_at timestamptz NOT NULL DEFAULT CURRENT_TIMESTAMP
);
INSERT INTO inventory.products (product_name)
VALUES ('soap'), ('shampoo'), ('conditioner');
3. 安装pgactive扩展
CREATE EXTENSION IF NOT EXISTS pgactive;
4. 配置连接信息
pgactive使用PostgreSQL的Foreign Data Wrapper功能来安全地管理节点间连接。在endpoint1上配置两个节点的连接信息:
-- endpoint1的连接信息
CREATE SERVER pgactive_server_endpoint1
FOREIGN DATA WRAPPER pgactive_fdw
OPTIONS (host '<endpoint1>', dbname 'app');
CREATE USER MAPPING FOR postgres
SERVER pgactive_server_endpoint1
OPTIONS (user 'postgres', password '<password>');
-- endpoint2的连接信息
CREATE SERVER pgactive_server_endpoint2
FOREIGN DATA WRAPPER pgactive_fdw
OPTIONS (host '<endpoint2>', dbname 'app');
CREATE USER MAPPING FOR postgres
SERVER pgactive_server_endpoint2
OPTIONS (user 'postgres', password '<password>');
5. 创建复制组并加入第一个节点
SELECT pgactive.pgactive_create_group(
node_name := 'endpoint1-app',
node_dsn := 'user_mapping=postgres pgactive_foreign_server=pgactive_server_endpoint1'
);
SELECT pgactive.pgactive_wait_for_node_ready();
配置第二个节点(endpoint2)
1. 验证pgactive加载
同样先确认pgactive已正确加载:
SELECT setting ~ 'pgactive'
FROM pg_catalog.pg_settings
WHERE name = 'shared_preload_libraries';
2. 安装pgactive扩展
CREATE EXTENSION IF NOT EXISTS pgactive;
3. 配置连接信息
在endpoint2上同样配置两个节点的连接信息:
-- endpoint1的连接信息
CREATE SERVER pgactive_server_endpoint1
FOREIGN DATA WRAPPER pgactive_fdw
OPTIONS (host '<endpoint1>', dbname 'app');
CREATE USER MAPPING FOR postgres
SERVER pgactive_server_endpoint1
OPTIONS (user 'postgres', password '<password>');
-- endpoint2的连接信息
CREATE SERVER pgactive_server_endpoint2
FOREIGN DATA WRAPPER pgactive_fdw
OPTIONS (host '<endpoint2>', dbname 'app');
CREATE USER MAPPING FOR postgres
SERVER pgactive_server_endpoint2
OPTIONS (user 'postgres', password '<password>');
4. 加入复制组
SELECT pgactive.pgactive_join_group(
node_name := 'endpoint2-app',
node_dsn := 'user_mapping=postgres pgactive_foreign_server=pgactive_server_endpoint2',
join_using_dsn := 'user_mapping=postgres pgactive_foreign_server=pgactive_server_endpoint1'
);
SELECT pgactive.pgactive_wait_for_node_ready();
执行此命令后,pgactive会开始同步数据库。同步完成后,您可以在endpoint2上验证数据是否已同步:
SELECT count(*) FROM inventory.products;
预期结果为3,与endpoint1上的记录数一致。
测试Active-Active功能
1. 在endpoint2上插入新数据
INSERT INTO inventory.products (product_name)
VALUES ('lotion');
2. 在endpoint1上验证数据同步
SELECT count(*) FROM inventory.products;
预期结果为4,确认新数据已成功同步。
监控与维护
1. 监控复制延迟
复制延迟是Active-Active架构中需要重点监控的指标。pgactive提供了专用函数来查看集群的复制延迟信息:
SELECT * FROM pgactive.pgactive_get_replication_lag_info();
建议设置以下告警:
- 当active状态为false时告警
- 当pending_wal_decoding持续增长时告警
- 当pending_wal_to_apply持续增长时告警
2. 处理写冲突
在Active-Active架构中,当两个节点同时修改同一行数据时会产生冲突。pgactive默认采用"最后更新获胜"的策略解决冲突,并将所有冲突记录在pgactive.pgactive_conflict_history表中。
查看冲突历史:
SELECT * FROM pgactive.pgactive_conflict_history;
如果自动解决的冲突结果不符合预期,管理员可以手动执行UPDATE语句修正数据。
清理资源
当不再需要Active-Active集群时,可以按照以下步骤清理:
- 从组中分离节点:
SELECT pgactive.pgactive_detach_nodes(ARRAY['endpoint1-app', 'endpoint2-app']);
- 在每个节点上禁用pgactive:
SELECT pgactive.pgactive_remove();
- 删除pgactive扩展:
DROP EXTENSION pgactive;
总结
通过AWS pgactive项目,我们可以轻松构建高可用的Active-Active PostgreSQL集群。本文详细介绍了从环境准备、节点配置到监控维护的全过程。在实际生产环境中,建议特别注意复制延迟监控和冲突处理策略,确保数据的一致性和系统的稳定性。
kernelopenEuler内核是openEuler操作系统的核心,既是系统性能与稳定性的基石,也是连接处理器、设备与服务的桥梁。C051
MiniMax-M2.1从多语言软件开发自动化到复杂多步骤办公流程执行,MiniMax-M2.1 助力开发者构建下一代自主应用——全程保持完全透明、可控且易于获取。Python00
kylin-wayland-compositorkylin-wayland-compositor或kylin-wlcom(以下简称kywc)是一个基于wlroots编写的wayland合成器。 目前积极开发中,并作为默认显示服务器随openKylin系统发布。 该项目使用开源协议GPL-1.0-or-later,项目中来源于其他开源项目的文件或代码片段遵守原开源协议要求。C01
PaddleOCR-VLPaddleOCR-VL 是一款顶尖且资源高效的文档解析专用模型。其核心组件为 PaddleOCR-VL-0.9B,这是一款精简却功能强大的视觉语言模型(VLM)。该模型融合了 NaViT 风格的动态分辨率视觉编码器与 ERNIE-4.5-0.3B 语言模型,可实现精准的元素识别。Python00
GLM-4.7GLM-4.7上线并开源。新版本面向Coding场景强化了编码能力、长程任务规划与工具协同,并在多项主流公开基准测试中取得开源模型中的领先表现。 目前,GLM-4.7已通过BigModel.cn提供API,并在z.ai全栈开发模式中上线Skills模块,支持多模态任务的统一规划与协作。Jinja00
agent-studioopenJiuwen agent-studio提供零码、低码可视化开发和工作流编排,模型、知识库、插件等各资源管理能力TSX0126
Spark-Formalizer-X1-7BSpark-Formalizer 是由科大讯飞团队开发的专用大型语言模型,专注于数学自动形式化任务。该模型擅长将自然语言数学问题转化为精确的 Lean4 形式化语句,在形式化语句生成方面达到了业界领先水平。Python00