备份恢复新体验！pgBackRest与IvorySQL的完美融合

pgBackRest作为PostgreSQL数据库的备份和还原工具，在软件架构上深度融合了功能与性能的双重考量。它不仅确保了数据的完整性与一致性，还提供了严密的安全防护，同时支持数据的高效压缩以及异步并行处理。今天，我们将聚焦pgBackRest与最新版本的IvorySQL3.1的简单应用，共同展示IvorySQL与PG生态工具的出色兼容性与实用效能。

#1 创建用户及目录

首先，我们需要创建一个名为“ivorysql”的普通用户，该用户将专门用于编译和使用IvorySQL以及pgBackRest，确保系统资源的使用与权限分配得到妥善管理。

useradd ivorysql
passwd ivorysql

接下来，我们需要创建备份目录以及仓库、日志、配置等专用目录。

在本实例中，我们将采用自定义配置文件路径的方式来使用pgBackRest。

mkdir -p /home/ivorysql/backup
mkdir -p /home/ivorysql/backup/repo
mkdir -p /home/ivorysql/backup/log
mkdir -p /home/ivorysql/backup/conf

#2 编译IvorySQL

注意事项：在执行./configure命令时，若系统提示需要安装ICU库，请确保执行以下命令以安装所需依赖，确保编译过程顺利进行。

yum install -y libicu-devel

首先，下载IvorySQL的源码文件包，随后执行编译和安装流程，确保IvorySQL能够顺利集成至您的系统中。

tar -zxvf IvorySQL-IvorySQL_3.1.tar.gz
./configure --prefix=`pwd`/install
make && make install

编译完成后，为确保IvorySQL能够正确运行，我们需要设置相应的环境变量，以便系统能够正确识别并加载相关的配置和库文件。

vi ~/.bashrc
export PATH=$PATH:/home/ivorysql/IvorySQL-IvorySQL_3.1/install/bin
export LD_LIBRARY_PATH=/home/ivorysql/IvorySQL-IvorySQL_3.1/install/lib
source ~/.bashrc

接下来，我们将编译pgBackRest。

wget https://github.com/pgbackrest/pgbackrest/archive/release/2.50.tar.gz
tar -zxvf 2.50.tar.gz
cd src && ./configure && make

随后，我们需要将编译完成的pgBackRest可执行文件复制到/usr/bin目录下。

cp /home/ivorysql/backup/pgbackrest /usr/bin/

#3 配置pgBackRest

创建pgBackRest的配置文件pgbackrest.conf

cd /home/ivorysql/backup/conf
touch pgbackrest.conf
vi pgbackrest.conf

配置文件内容如下：

[ivorysql]
pg1-path=/home/ivorysql/IvorySQL-IvorySQL_3.1/install/data
pg1-user=ivorysql
pg1-port=5432


[global]
repo1-block=y
repo1-bundle=y
repo1-path=/home/ivorysql/backup/repo
repo1-cipher-pass=L8yY5t2uaAf6/+uHb0rEWBDZ+n5ZA9yIk3BxrtCTwEns7znjwpLb0ReIxcSHnqxg
repo1-cipher-type=aes-256-cbc
repo1-retention-full=2
repo1-retention-diff=1
log-path=/home/ivorysql/backup/log
start-fast=y

[global:archive-push]
compress-level=3

其中主要参数如下：

• pg1-path为当前数据库数据文件夹绝对路径

• pg1-user为数据库用户，此处使用默认用户

• pg1-port为数据库端口

• repo-path为pgbackrest备份仓库路径

• log-path为pgbackrest的日志路径

#4 配置数据库

（一）初始化数据库

initdb -D data

接下来，我们需要对ivorysql.conf配置文件进行修改。

#增加如下内容
archive_command = 'pgbackrest --pg-version-force=16 --config=/home/ivorysql/backup/conf/pgbackrest.conf --stanza=ivorysql archive-push %p'
archive_mode = on
hot_standby = on
log_filename = 'postgresql.log'
max_wal_senders = 3
wal_level = replica

请注意，由于IvorySQL对原有的pg_control文件进行了修改，因此我们需要在使用pgBackRest时添加--pg-version-force=16参数，以便绕过版本验证步骤，确保备份和恢复过程的顺利进行。

（二）启动数据库

pg_ctl -D data start

#5 备份操作

首先，我们需要创建存储节点，以存储IvorySQL的备份数据。在执行相关命令时，请务必添加--pg-version-force=16参数，以兼容IvorySQL对pg_control文件的修改，确保备份过程的正确性和顺利性。

pgbackrest --stanza=ivorysql stanza-create --config=/home/ivorysql/backup/conf/pgbackrest.conf --pg-version-force=16

（一）测试归档

首先，我们需要创建数据表并填充测试数据，随后执行切换日志文件的操作，以模拟数据库的正常使用场景，为后续备份和恢复操作提供必要的测试环境。

[ivorysql@localhost install]$ psql
psql (16.1)
Type "help" for help.

ivorysql=# create table test(id int);
CREATE TABLE
ivorysql=# insert into test select generate_series(1,10000);
INSERT 0 10000
ivorysql=# select pg_switch_wal();
 pg_switch_wal

 0/20BA9E0
(1 row)

（二）查看归档文件

[ivorysql@localhost ~]$ cd /home/ivorysql/backup/repo/archive/ivorysql/16-1/0000000100000000
[ivorysql@localhost 0000000100000000]$ ll
total 3864
-rw-r-----. 1 ivorysql ivorysql 3694848 Mar  8 04:26 000000010000000000000001-bdac3cc50aa5da3dc4309046f40623fed9a2b379.gz
-rw-r-----. 1 ivorysql ivorysql  254848 Mar  8 04:27 000000010000000000000002-62d76ca6d4d749b7d885621aafeee498775fde14.gz

（三）创建全量备份

[ivorysql@localhost ~]$ pgbackrest --stanza=ivorysql --type=full backup --config=/home/ivorysql/backup/conf/pgbackrest.conf --pg-version-force=16 --log-level-console=info
2024-03-08 04:32:12.989 P00   INFO: backup command begin 2.50: --config=/home/ivorysql/backup/conf/pgbackrest.conf --exec-id=4644-5c559805 --log-level-console=info --log-path=/home/ivorysql/backup/log --pg1-path=/home/ivorysql/IvorySQL-IvorySQL_3.1/install/data --pg1-port=5432 --pg1-user=ivorysql --pg-version-force=16 --repo1-block --repo1-bundle --repo1-cipher-pass=<redacted> --repo1-cipher-type=aes-256-cbc --repo1-path=/home/ivorysql/backup/repo --repo1-retention-diff=1 --repo1-retention-full=2 --stanza=ivorysql --start-fast --type=full
2024-03-08 04:32:13.697 P00   INFO: execute non-exclusive backup start: backup begins after the requested immediate checkpoint completes
2024-03-08 04:32:14.403 P00   INFO: backup start archive = 000000010000000000000006, lsn = 0/6000028
2024-03-08 04:32:14.403 P00   INFO: check archive for prior segment 000000010000000000000005
2024-03-08 04:32:16.500 P00   INFO: execute non-exclusive backup stop and wait for all WAL segments to archive
2024-03-08 04:32:16.700 P00   INFO: backup stop archive = 000000010000000000000006, lsn = 0/6000100
2024-03-08 04:32:16.703 P00   INFO: check archive for segment(s) 000000010000000000000006:000000010000000000000006
2024-03-08 04:32:16.715 P00   INFO: new backup label = 20240308-043213F
2024-03-08 04:32:16.751 P00   INFO: full backup size = 35.6MB, file total = 1292
2024-03-08 04:32:16.751 P00   INFO: backup command end: completed successfully (3763ms)
2024-03-08 04:32:16.751 P00   INFO: expire command begin 2.50: --config=/home/ivorysql/backup/conf/pgbackrest.conf --exec-id=4644-5c559805 --log-level-console=info --log-path=/home/ivorysql/backup/log --repo1-cipher-pass=<redacted> --repo1-cipher-type=aes-256-cbc --repo1-path=/home/ivorysql/backup/repo --repo1-retention-diff=1 --repo1-retention-full=2 --stanza=ivorysql
2024-03-08 04:32:16.756 P00   INFO: repo1: 16-1 remove archive, start = 000000010000000000000001, stop = 000000010000000000000003
2024-03-08 04:32:16.756 P00   INFO: expire command end: completed successfully (5ms)

（四）创建差异备份

[ivorysql@localhost ~]$ pgbackrest --stanza=ivorysql --type=diff backup --config=/home/ivorysql/backup/conf/pgbackrest.conf --pg-version-force=16 --log-level-console=info
2024-03-08 04:32:58.113 P00   INFO: backup command begin 2.50: --config=/home/ivorysql/backup/conf/pgbackrest.conf --exec-id=4653-761b3d49 --log-level-console=info --log-path=/home/ivorysql/backup/log --pg1-path=/home/ivorysql/IvorySQL-IvorySQL_3.1/install/data --pg1-port=5432 --pg1-user=ivorysql --pg-version-force=16 --repo1-block --repo1-bundle --repo1-cipher-pass=<redacted> --repo1-cipher-type=aes-256-cbc --repo1-path=/home/ivorysql/backup/repo --repo1-retention-diff=1 --repo1-retention-full=2 --stanza=ivorysql --start-fast --type=diff
2024-03-08 04:32:58.831 P00   INFO: last backup label = 20240308-043213F, version = 2.50
2024-03-08 04:32:58.831 P00   INFO: execute non-exclusive backup start: backup begins after the requested immediate checkpoint completes
2024-03-08 04:32:59.337 P00   INFO: backup start archive = 000000010000000000000008, lsn = 0/8000028
2024-03-08 04:32:59.337 P00   INFO: check archive for prior segment 000000010000000000000007
2024-03-08 04:33:00.520 P00   INFO: execute non-exclusive backup stop and wait for all WAL segments to archive
2024-03-08 04:33:00.721 P00   INFO: backup stop archive = 000000010000000000000008, lsn = 0/8000100
2024-03-08 04:33:00.723 P00   INFO: check archive for segment(s) 000000010000000000000008:000000010000000000000008
2024-03-08 04:33:00.734 P00   INFO: new backup label = 20240308-043213F_20240308-043258D
2024-03-08 04:33:00.764 P00   INFO: diff backup size = 8.3KB, file total = 1292
2024-03-08 04:33:00.764 P00   INFO: backup command end: completed successfully (2652ms)
2024-03-08 04:33:00.765 P00   INFO: expire command begin 2.50: --config=/home/ivorysql/backup/conf/pgbackrest.conf --exec-id=4653-761b3d49 --log-level-console=info --log-path=/home/ivorysql/backup/log --repo1-cipher-pass=<redacted> --repo1-cipher-type=aes-256-cbc --repo1-path=/home/ivorysql/backup/repo --repo1-retention-diff=1 --repo1-retention-full=2 --stanza=ivorysql
2024-03-08 04:33:00.768 P00   INFO: repo1: 16-1 no archive to remove
2024-03-08 04:33:00.768 P00   INFO: expire command end: completed successfully (3ms)

（五）增量备份

[ivorysql@localhost ~]$ pgbackrest --stanza=ivorysql --type=incr backup --config=/home/ivorysql/backup/conf/pgbackrest.conf --pg-version-force=16 --log-level-console=info
2024-03-08 04:33:24.955 P00   INFO: backup command begin 2.50: --config=/home/ivorysql/backup/conf/pgbackrest.conf --exec-id=4668-1454bb89 --log-level-console=info --log-path=/home/ivorysql/backup/log --pg1-path=/home/ivorysql/IvorySQL-IvorySQL_3.1/install/data --pg1-port=5432 --pg1-user=ivorysql --pg-version-force=16 --repo1-block --repo1-bundle --repo1-cipher-pass=<redacted> --repo1-cipher-type=aes-256-cbc --repo1-path=/home/ivorysql/backup/repo --repo1-retention-diff=1 --repo1-retention-full=2 --stanza=ivorysql --start-fast --type=incr
2024-03-08 04:33:25.673 P00   INFO: last backup label = 20240308-043213F_20240308-043258D, version = 2.50
2024-03-08 04:33:25.673 P00   INFO: execute non-exclusive backup start: backup begins after the requested immediate checkpoint completes
2024-03-08 04:33:26.379 P00   INFO: backup start archive = 00000001000000000000000A, lsn = 0/A000028
2024-03-08 04:33:26.379 P00   INFO: check archive for prior segment 000000010000000000000009
2024-03-08 04:33:27.519 P00   INFO: execute non-exclusive backup stop and wait for all WAL segments to archive
2024-03-08 04:33:27.726 P00   INFO: backup stop archive = 00000001000000000000000A, lsn = 0/A000100
2024-03-08 04:33:27.728 P00   INFO: check archive for segment(s) 00000001000000000000000A:00000001000000000000000A
2024-03-08 04:33:27.739 P00   INFO: new backup label = 20240308-043213F_20240308-043325I
2024-03-08 04:33:27.772 P00   INFO: incr backup size = 8.3KB, file total = 1292
2024-03-08 04:33:27.772 P00   INFO: backup command end: completed successfully (2818ms)
2024-03-08 04:33:27.772 P00   INFO: expire command begin 2.50: --config=/home/ivorysql/backup/conf/pgbackrest.conf --exec-id=4668-1454bb89 --log-level-console=info --log-path=/home/ivorysql/backup/log --repo1-cipher-pass=<redacted> --repo1-cipher-type=aes-256-cbc --repo1-path=/home/ivorysql/backup/repo --repo1-retention-diff=1 --repo1-retention-full=2 --stanza=ivorysql
2024-03-08 04:33:27.775 P00   INFO: repo1: 16-1 no archive to remove
2024-03-08 04:33:27.776 P00   INFO: expire command end: completed successfully (4ms)

（六）查看备份信息

[ivorysql@localhost ~]$ pgbackrest --stanza=ivorysql info --config=/home/ivorysql/backup/conf/pgbackrest.conf --log-level-console=info
stanza: ivorysql
    status: ok
    cipher: aes-256-cbc
    db (current)
    wal archive min/max (16): 000000010000000000000004/00000001000000000000000A

    full backup: 20240308-043137F
        timestamp start/stop: 2024-03-08 04:31:37+08 / 2024-03-08 04:31:41+08
        wal start/stop: 000000010000000000000004 / 000000010000000000000004
        database size: 35.6MB, database backup size: 35.6MB
        repo1: backup size: 4.8MB

    full backup: 20240308-043213F
        timestamp start/stop: 2024-03-08 04:32:13+08 / 2024-03-08 04:32:16+08
        wal start/stop: 000000010000000000000006 / 000000010000000000000006
        database size: 35.6MB, database backup size: 35.6MB
        repo1: backup size: 4.8MB

    diff backup: 20240308-043213F_20240308-043258D
        timestamp start/stop: 2024-03-08 04:32:58+08 / 2024-03-08 04:33:00+08
        wal start/stop: 000000010000000000000008 / 000000010000000000000008
        database size: 35.6MB, database backup size: 8.3KB
        repo1: backup size: 480B
        backup reference list: 20240308-043213F

    incr backup: 20240308-043213F_20240308-043325I
        timestamp start/stop: 2024-03-08 04:33:25+08 / 2024-03-08 04:33:27+08
        wal start/stop: 00000001000000000000000A / 00000001000000000000000A
        database size: 35.6MB, database backup size: 8.3KB
        repo1: backup size: 480B
        backup reference list: 20240308-043213F, 20240308-043213F_20240308-043258D

（七）验证

[ivorysql@localhost ~]$ pgbackrest --stanza=ivorysql verify --config=/home/ivorysql/backup/conf/pgbackrest.conf --log-level-console=info --verbose=y
2024-03-08 04:35:58.862 P00   INFO: verify command begin 2.50: --config=/home/ivorysql/backup/conf/pgbackrest.conf --exec-id=4719-18757686 --log-level-console=info --log-path=/home/ivorysql/backup/log --repo1-cipher-pass=<redacted> --repo1-cipher-type=aes-256-cbc --repo1-path=/home/ivorysql/backup/repo --stanza=ivorysql --verbose
2024-03-08 04:35:59.441 P00   INFO: stanza: ivorysql
                                    status: ok
                                      archiveId: 16-1, total WAL checked: 7, total valid WAL: 7
                                        missing: 0, checksum invalid: 0, size invalid: 0, other: 0
                                      backup: 20240308-043137F, status: valid, total files checked: 1292, total valid files: 1292
                                        missing: 0, checksum invalid: 0, size invalid: 0, other: 0
                                      backup: 20240308-043213F, status: valid, total files checked: 1292, total valid files: 1292
                                        missing: 0, checksum invalid: 0, size invalid: 0, other: 0
                                      backup: 20240308-043213F_20240308-043258D, status: valid, total files checked: 1292, total valid files: 1292
                                        missing: 0, checksum invalid: 0, size invalid: 0, other: 0
                                      backup: 20240308-043213F_20240308-043325I, status: valid, total files checked: 1292, total valid files: 1292
                                        missing: 0, checksum invalid: 0, size invalid: 0, other: 0
2024-03-08 04:35:59.441 P00   INFO: verify command end: completed successfully (580ms)

#6 总结

上述内容简要介绍了pgBackRest与IvorySQL的基础应用。由于IvorySQL对PostgreSQL原生的控制文件进行了修改，因此在执行各类备份操作时，我们需格外注意并采取相应的措施，以确保备份的完整性和准确性。

社区仓库：

https://github.com/IvorySQL/IvorySQL

IvorySQL社区欢迎并赞赏所有类型的贡献，期待您的加入！