pg wal日志归档

归档参数如下： 

wal_level='replica'

# - Archiving -

archive_mode = on               # enables archiving; off, on, or always
                                # (change requires restart)
archive_command = 'test ! -f /mnt/backup/%f && cp %p /mnt/backup/%f'
                                # command to use to archive a logfile segment
                                # placeholders: %p = path of file to archive
                                #               %f = file name only
                                # e.g. 'test ! -f /mnt/server/archivedir/%f && cp %p /mnt/server/archivedir/%f'
#archive_timeout = 0            # force a logfile segment switch after this
                                # number of seconds; 0 disables
                                
#wal_level archive 或更高级别
#archive_mode on 开启归档模式，always 主从模式时，从库也开启归档模式。需要重启数据库
#archive_command 归档时触发的命令或脚本， 不需要重新启动数据库。
#archive_timeout 可以理解为超过指定时间强制执行归档; 

归档触发条件说明：

1. 手动执行 select pg_switch_wal();
2. WAL 日志写满后触发归档 WAL 日志文件默认为 16MB，这个值可以在编译 PostgreSQL 时通过参数 “–with-wal-segsize” 更改，编译后不能修改。
3. 如果设置 archive_timeout， 超时触发。

实际应用

目标：按日期存放wal日志到/pg12.2/archivelog/

编写归档脚本 archive.sh ，设置权限 chmod 700 archive.sh

 

#!/bin/bash

export LANG=en_US.utf8
export DATE=`date +"%Y%m%d"`

BASEDIR="/pg12.2/data/archivelog"
WALBASEDIR="/pg12.2/data"
if [ ! -d $BASEDIR/$DATE ]; then
  mkdir -p $BASEDIR/$DATE
  if [ ! -d $BASEDIR/$DATE ]; then
    echo "error mkdir -p $BASEDIR/$DATE"
    exit 1
  fi
fi
cp $WALBASEDIR/$1 $BASEDIR/$DATE/$2
if [ $? -eq 0 ]; then
  exit 0
else
  echo -e "cp $1 $BASEDIR/$DATE/$2 error"
  exit 1
fi
echo -e "backup failed"
exit 1

配置postgres.conf 中的archive_command命令:

archive_command = 'sh /pg12.2/data/archivelog/archive.sh %p %f'

重新加载生效

定时清空归档文件

pg_wal_clean.sh，使用pg_controldata 查看最后归档点，配合pg_archivecleanup命令清除最新归档点之前的wal

#!/bin/bash
LASTWAL=`/pg12.2/bin/pg_controldata  -D /pg12.2/data |grep "Latest checkpoint's REDO WAL file" |awk '{print $6}'`
echo $LASTWAL 
/pg12.2/bin/pg_archivecleanup -d /pg12.2/archivelog $LASTWAL

定时任务启动清空wal脚本

crontab -e这样可以已编辑模式打开个人的crontab配置文件

 

相关数据库函数使用:

select pg_switch_wal(); #日志切换