pg_probackup和pg_basebackup对比

pg_probackup和pg_basebackup对比

概要

pg_probackup（或在 openGauss 中的 gs_probackup）完全可以取代 pg_basebackup（或 gs_basebackup）进行整库物理备份，并且支持更丰富的功能，如增量备份、备份验证和保留策略管理。取代的流程可分为三步：初始化备份库、注册实例、执行备份，随后备份结果等同于 pg_basebackup -D /data -h 172.x.x.178 -p 3011 -U bpx_monitor1 -X fetch -K /redo。

1. 工具定位与能力对比

1.1 pg_basebackup

• 用于全量基础备份，通过复制整个数据目录生成备份，支持 WAL 流式 (-X stream) 或打包归档 (-X fetch) 模式。
• 命令简洁，一条命令即可运行，但不支持增量备份、校验或元数据管理。

1.2 pg_probackup

• 企业级备份管理工具，支持 全量备份、块级增量备份（ptrack／page 模式）、备份验证、并发校验、保留策略、元数据查询等高级功能。
• 备份流程分三步：init 初始化备份库，add-instance 注册数据库实例，backup 执行备份；也可脚本化实现“一键”备份。
• 可自动管理 WAL，无需手动指定 -K 参数；在执行 backup --stream 时，会自动抓取并保存所需 WAL 日志。

2. 替代表达式：等效命令

以下示例展示如何用 pg_probackup 实现等效于：

pg_basebackup -D /data \
  -h 172.x.x.178 \
  -p 3011 \
  -U bpx_monitor1 \
  -X fetch \
  -K /redo

2.1 初始化备份库

pg_probackup init \
  -B /opt/pgbackups

在目录 /opt/pgbackups 下创建备份库并生成必要元数据结构。

2.2 注册实例

pg_probackup add-instance \
  -B /opt/pgbackups \
  --instance prod1 \
  --pgdata /data \
  --remote-host 172.x.x.178 \
  --remote-port 3011 \
  --remote-user bpx_monitor1

将远程主机实例 prod1 注册到备份库，指定数据目录和连接参数。

2.3 执行全量 + WAL 流式备份

pg_probackup backup \
  --instance prod1 \
  --stream \
  --compress \
  --compress-level 3

• --stream：等同于 pg_basebackup -X stream，实时抓取 WAL。
• 如果需要打包归档 WAL，可配合实例的 archive_command 使用 --stream 或在备份后用 --archive 选项收集 WAL。

3. 其他常见操作对比

功能	pg_basebackup 示例	pg_probackup 对应命令
验证备份	—	pg_probackup validate --instance prod1
增量备份	—	pg_probackup backup --instance prod1 --backup-mode ptrack
清理旧备份	—	pg_probackup delete --instance prod1 --expired
查看备份列表	—	pg_probackup show --instance prod1

4. 优势与注意事项

• 优势：

  • 丰富的增量备份模式与保留策略，降低存储占用并简化管理；
  • 支持备份完整性校验与并发检查，提升备份可靠性；
  • 元数据、操作一体化管理，可脚本化实现监控与告警。

• 注意：

  • 首次使用需初始化备份库并注册实例；
  • 确保备份库目录有足够权限和空间；
  • 配置正确的 archive_command 或使用 --stream，以保证备份包含完整 WAL。

5. 参考资料

1. PostgreSQL 官方文档：pg_basebackup 用法详解 (PostgreSQL)
2. Postgres Pro 文档：pg_probackup 应用指南 (Postgres Professional)
3. Habr 文章：“What’s in Store for pg_probackup 3” (Habr)
4. Stormatics 博客：PostgreSQL 备份最佳实践 (Stormatics)
5. Severalnines 博客：pg_basebackup 介绍 (Severalnines)
6. DBA.StackExchange 讨论：pg_basebackup WAL 行为 (Database Administrators Stack Exchange)
7. pg_probackup GitHub 源码与文档 (GitHub)
8. Tech-en 文章：pg_probackup 特性概览 (tech-en.netlify.app)
9. Postgres Pro 社区博客：pg_probackup 常见错误解决 (Stack Overflow)
10. PostgreSQL Enterprise 文档：pg_probackup 13.x (Postgres Professional)

验证SSH是否必须 ?

概要

在当前版本的 pg_probackup（或其在 openGauss 中的变体 gs_probackup）里，远程模式（remote mode）唯一被支持的传输协议就是 SSH；也就是说，要通过 --remote-host/--remote-user 等选项对远程主机执行 add-instance、backup、restore 等命令，都必须先配置好无密码 SSH 互信，否则无法连接并会报错 (PostgresPro, Postgres Professional)。

---

为什么必须使用 SSH

1. 设计约束：文档明确指出，远程模式所有操作均通过 SSH 隧道完成，并且需要在 备份主机（backup host）和 数据库主机（db host）上都安装相同版本的 pg_probackup/gs_probackup 并能通过 SSH 互信登录 (PostgresPro)。
2. 安全性考量：将数据库端口直接暴露在网络上既不安全也不常见，因此工具选择 SSH 作为默认隧道协议，既能加密传输，又可复用操作系统现有的认证机制 (GitHub)。
3. 实现简洁：使用 SSH 可复用 ssh 客户端与服务端，无需为每个备份命令实现新的网络协议，简化了运维和开发复杂度 (GitHub)。

---

如果无法使用 SSH，有哪些替代方案？

虽然远程模式强制 SSH，但以下几种方式可实现类似功能：

1. 在目标服务器本地运行备份

   • 直接登录到数据库服务器，使用本地的 vb_probackup（pg_probackup/gs_probackup）命令进行备份，无需 SSH 隧道 (Severalnines)。

2. 使用网络文件系统（NFS、SMB）

   • 将数据库数据目录或备份存储目录通过 NFS/SMB 挂载到备份主机上，然后在备份主机上直接操作挂载目录下的 PGDATA，相当于“本地”模式备份，无需 SSH (Database Administrators Stack Exchange)。

3. 逻辑备份或其他工具

   • 使用 pg_dump/pg_dumpall（可通过 -h 直接连接远程数据库）完成逻辑级别备份，或使用第三方工具（如 barman、wal-g）支持基于 libpq 的远程连接 (Database Administrators Stack Exchange)。

---

结论

• 远程模式 (--remote-host)：必须先配置和验证无密码 SSH 连接，否则 add-instance 会因为无法建立 SSH 通道而失败；
• 若不便或无法使用 SSH：可选择在数据库主机本地直接运行备份命令，或通过挂载共享存储、使用逻辑备份工具等方式绕过 SSH 隧道。

请根据您的运维环境和安全策略，选择最适合的备份方案。