PostgreSQL主从同步介绍

PostgreSQL主从同步介绍

PostgreSQL 主从同步(也称为流复制)的原理是基于基于日志的复制机制(Write-Ahead Logging, WAL)进行的。这种机制使得数据在主数据库(Primary)和从数据库(Standby)之间保持同步,从而确保高可用性和数据冗余。

主从同步的基本概念

  1. 主数据库(Primary):负责处理所有写操作(插入、更新、删除)以及读操作。
  2. 从数据库(Standby):负责接收从主数据库传递来的WAL日志,并应用这些日志以保持数据的一致性。可以配置为只读以分担查询负载。

流复制原理

PostgreSQL 流复制的关键机制如下:

  1. WAL 日志:主数据库将所有变更首先写入 WAL 日志文件。这些日志记录了数据库的每一个修改操作。
  2. 发送 WAL 数据 :主数据库将 WAL 日志发送给从数据库。发送是通过 WAL Sender 进程(wal_sender)来完成的。
  3. 接收和写入 WAL 数据 :从数据库通过 WAL Receiver 进程(wal_receiver)接受来自主数据库的 WAL 日志,并将其写入本地存储。
  4. 应用 WAL 数据:从数据库将接收到的 WAL 日志应用到自身的数据库实例中,从而使数据与主数据库保持一致。

流复制的工作流程

  1. 主数据库写 WAL 日志

    • 主数据库生成的每个事务变更都会记录到 WAL 日志文件中。
    • WAL 日志文件通常被以 16MB 为一个文件块存储,称为 WAL 段。
  2. WAL Sender 发送日志

    • 主数据库的 WAL Sender 进程将最新的 WAL 日志记录发送给从数据库。
    • postgresql.conf 中的 max_wal_senders 参数决定了可以启动多少个 WAL Sender 进程。
  3. WAL Receiver 接收日志

    • 从数据库的 WAL Receiver 进程接收 WAL 日志,并将其保存在本地的 WAL 目录中。
    • 从数据库启动时,配置文件 recovery.conf 中的 standby_mode 设置为 on,并配置 primary_conninfo 用于连接主数据库。
  4. 应用 WAL 日志

    • 从数据库将接收到的 WAL 日志应用到自己的数据文件中,以使其与主数据库保持同步。
    • 在 PostgreSQL 13 版本及更高版本中,recovery.conf 的内容被合并到 postgresql.conf 中。

PostgreSQL 主从同步利用 WAL 日志文件实现数据同步,确保从数据库和主数据库之间的数据一致性。通过 WAL Sender 和 WAL Receiver 进程,变更数据被实时传输和应用,使系统能够有效地实现高可用性和负载均衡。

相关推荐
chen9454 小时前
mysql 3节点mgr集群部署
运维·后端
LH_R5 小时前
OneTerm开源堡垒机实战(三):功能扩展与效率提升
运维·后端·安全
dessler6 小时前
Hadoop HDFS-高可用集群部署
linux·运维·hdfs
DemonAvenger7 小时前
NoSQL与MySQL混合架构设计:从入门到实战的最佳实践
数据库·mysql·性能优化
AAA修煤气灶刘哥18 小时前
后端人速藏!数据库PD建模避坑指南
数据库·后端·mysql
RestCloud1 天前
揭秘 CDC 技术:让数据库同步快人一步
数据库·api
少妇的美梦1 天前
logstash教程
运维
chen9451 天前
k8s集群部署vector日志采集器
运维
chen9451 天前
aws ec2部署harbor,使用s3存储
运维
得物技术1 天前
MySQL单表为何别超2000万行?揭秘B+树与16KB页的生死博弈|得物技术
数据库·后端·mysql