Postgres-12版本数据库主从模式部署实现数据迁移_pg 主从 不同版本(1)

于 2024-05-16 22:35:53 发布
阅读量463 收藏 9
点赞数 3
文章标签： 运维 linux 面试
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2301_76379269/article/details/138977544
版权

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以点击这里获取！

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

说明：
wal_level 指定写入到wal中的信息，默认是minimal，只写从crash中恢复或者快速shutdown需要的信息。
#replica 是在minimal的基础上添加wal archiving需要的信息。
#logical 增加逻辑编码需要的信息。minimal wal不包含从base backup和wal log重新构建数据库数据的信息。replica或者logical可以。老版本的参数archive或者hot_standby 在这里被映射到replica模式

  • 修改postgres数据的密码
[postgres@docker-slave-79101 ~]$ psql
psql (12.3)
Type "help" for help.

postgres=# alter user postgres with password 'postgres';
ALTER ROLE
postgres=# select \* from pg\_shadow;
 usename  | usesysid | usecreatedb | usesuper | userepl | usebypassrls |               passwd                | valuntil | useconfig 
----------+----------+-------------+----------+---------+--------------+-------------------------------------+----------+-----------
 postgres |       10 | t           | t        | t       | t            | md53175bce1d3201d16594cebf9d7eb3f9d |          |

- 重启数据库

 su - postgres -c "pg\_ctl -D /PG/12/ restart"

从节点上操作

- 从主节点上获取数据

pg_basebackup -h 192.168.79.101 -p 5432 -U rsyn -Fp -Xs -Pv -R -D /PG/12
  • -h –指定作为主服务器的主机。
    -D –指定数据目录。
    -U –指定连接用户。
    -P –启用进度报告。
    -v –启用详细模式。
    -R–启用恢复配置的创建：创建一个standby.signal文件，并将连接设置附加到数据目录下的postgresql.auto.conf。
    -X–用于在备份中包括所需的预写日志文件（WAL文件）。流的值表示在创建备份时流式传输WAL。
    -C –在开始备份之前，允许创建由-S选项命名的复制插槽。
    -S –指定复制插槽名称。

- 修改配置文件:standby.signal和postgresql.conf

[postgres@docker-slave-79102 12]$ vim standby.signal 
[postgres@docker-slave-79102 12]$ cat standby.signal 
standby_mode = 'on'

[postgres@docker-slave-79102 12]$ vim postgresql.conf
#增加以下配置（/搜索关键词，进行修改，避免配置重复）：
primary_conninfo = 'host=192.168.79.101 port=5432 user=rsyn password=rsyn'
recovery_target_timeline = latest # 同步最新的数据
#从节点连接数要大于主节点
max_connections = 500 
hot_standby = on
max_standby_streaming_delay = 30s
wal_receiver_status_interval = 10s
hot_standby_feedback = on

#启动数据库
[postgres@docker-slave-79102 12]$ pg_ctl start -D /PG/12 
waiting for server to start....2020-08-02 17:18:38.773 CST [13105] LOG:  starting PostgreSQL 12.3 on x86_64-pc-linux-gnu, compiled by gcc (GCC) 4.8.5 20150623 (Red Hat 4.8.5-16), 64-bit
2020-08-02 17:18:38.774 CST [13105] LOG:  listening on IPv4 address "0.0.0.0", port 5432
2020-08-02 17:18:38.774 CST [13105] LOG:  listening on IPv6 address "::", port 5432
2020-08-02 17:18:38.787 CST [13105] LOG:  listening on Unix socket "/tmp/.s.PGSQL.5432"
2020-08-02 17:18:38.819 CST [13105] LOG:  redirecting log output to logging collector process
2020-08-02 17:18:38.819 CST [13105] HINT:  Future log output will appear in directory "log".

验证：

主节点：

[postgres@docker-slave-79101 12]$ psql
psql (12.3)
Type "help" for help.

postgres=# select client\_addr,sync\_state from pg\_stat\_replication;
  client_addr   | sync_state 
----------------+------------
 192.168.79.102 | async
(1 row)

postgres=# \l
                                  List of databases
   Name    |  Owner   | Encoding |   Collate   |    Ctype    |   Access privileges   
-----------+----------+----------+-------------+-------------+-----------------------
 postgres  | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 smart     | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 template0 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
 template1 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
(4 rows)

postgres=# create database test
postgres-# \l
                                  List of databases
   Name    |  Owner   | Encoding |   Collate   |    Ctype    |   Access privileges   
-----------+----------+----------+-------------+-------------+-----------------------
 postgres  | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 smart     | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 template0 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
 template1 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
(4 rows)

postgres=# create database test;
CREATE DATABASE
postgres=# 
postgres=# \l
                                  List of databases
   Name    |  Owner   | Encoding |   Collate   |    Ctype    |   Access privileges   
-----------+----------+----------+-------------+-------------+-----------------------
 postgres  | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 smart     | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 template0 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
 template1 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
 test      | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
(5 rows)

postgres=# \c test
You are now connected to database "test" as user "postgres".
test=# \l
                                  List of databases
   Name    |  Owner   | Encoding |   Collate   |    Ctype    |   Access privileges   
-----------+----------+----------+-------------+-------------+-----------------------
 postgres  | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 smart     | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 template0 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
 template1 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
 test      | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
(5 rows)

test=# CREATE TABLE Person(
   ID INT PRIMARY KEY     NOT NULL,
   NAME           TEXT    NOT NULL,
   AGE            INT     NOT NULL,
   TALL           CHAR(50),
   WEIGHT         REAL
);
CREATE TABLE
test=# INSERT INTO Person( ID, NAME, AGE, TALL, WEIGHT) 
test-# VALUES(2,'张三'，18，185,60);
ERROR:  syntax error at or near "，18，185"
LINE 2: VALUES(2,'张三'，18，185,60);
                       ^
test=# INSERT INTO Person( ID, NAME, AGE, TALL, WEIGHT) 
VALUES(2,'张三'，18，185, 60);
ERROR:  syntax error at or near "，18，185"
LINE 2: VALUES(2,'张三'，18，185, 60);
                       ^
test=# INSERT INTO Person( ID, NAME, AGE, TALL, WEIGHT) 
VALUES(2,'张三',18,185, 60);
INSERT 0 1
test=# 
test=# 
test=# select \* from Person;
 id | name | age |                        tall                        | weight 
----+------+-----+----------------------------------------------------+--------
  2 | 张三 |  18 | 185                                                |     60
(1 row)

test=# INSERT INTO Person( ID, NAME, AGE, TALL, WEIGHT) 
test-# VALUES(2,'李四',18,185, 60);
ERROR:  duplicate key value violates unique constraint "person\_pkey"
DETAIL:  Key (id)=(2) already exists.
test=# INSERT INTO Person( ID, NAME, AGE, TALL, WEIGHT) 
VALUES(3,'李四',18,185, 60);
INSERT 0 1
test=# select \* from Person;
 id | name | age |                        tall                        | weight 
----+------+-----+----------------------------------------------------+--------
  2 | 张三 |  18 | 185                                                |     60
  3 | 李四 |  18 | 185                                                |     60
(2 rows)

test=# select \* from Person;
 id | name | age |                        tall                        | weight 
----+------+-----+----------------------------------------------------+--------
  2 | 张三 |  18 | 185                                                |     60
  3 | 李四 |  18 | 185                                                |     60
(2 rows)

test=# \du Person
           List of roles
 Role name | Attributes | Member of 
-----------+------------+-----------

test=# \du Person;
           List of roles
 Role name | Attributes | Member of 
-----------+------------+-----------

test=# \tPerson;
invalid command \tPerson;
Try \? for help.
test=# \t Person;
unrecognized value "Person" for "tuples\_only": Boolean expected
test=# 
test=# 
test=# 
test=# 
test=# select \* from Person;
 id | name | age |                        tall                        | weight 
----+------+-----+----------------------------------------------------+--------
  2 | 张三 |  18 | 185                                                |     60
  3 | 李四 |  18 | 185                                                |     60
(2 rows)

test=# INSERT INTO Person( ID, NAME, AGE, TALL, WEIGHT) 
test-# VALUES(1,'王五',18,'185cm','60');
INSERT 0 1
test=# select \* from Person;
 id | name | age |                        tall                        | weight 
----+------+-----+----------------------------------------------------+--------
  2 | 张三 |  18 | 185                                                |     60
  3 | 李四 |  18 | 185                                                |     60
  1 | 王五 |  18 | 185cm                                              |     60
(3 rows)

test=# 
test=# select \* from Person;
 id | name | age |                        tall                        | weight 
----+------+-----+----------------------------------------------------+--------
  2 | 张三 |  18 | 185                                                |     60
  3 | 李四 |  18 | 185                                                |     60
  1 | 王五 |  18 | 185cm                                              |     60
(3 rows)

test=#

从节点

[postgres@docker-slave-79102 12]$ ps -ef | grep postgres
root      12177   1820  0 16:14 pts/1    00:00:00 su - postgres
postgres  12178  12177  0 16:14 pts/1    00:00:01 -bash
postgres  13105      1  0 17:18 ?        00:00:00 /opt/postgres/bin/postgres -D /PG/12
postgres  13106  13105  0 17:18 ?        00:00:00 postgres: logger   
postgres  13107  13105  0 17:18 ?        00:00:00 postgres: startup   recovering 00000001000000000000000D
postgres  13108  13105  0 17:18 ?        00:00:00 postgres: checkpointer   
postgres  13109  13105  0 17:18 ?        00:00:00 postgres: background writer   
postgres  13110  13105  0 17:18 ?        00:00:00 postgres: stats collector   
postgres  13111  13105  1 17:18 ?        00:00:00 postgres: walreceiver   streaming 0/D000148
postgres  13112  12178  0 17:18 pts/1    00:00:00 ps -ef
postgres  13113  12178  0 17:18 pts/1    00:00:00 grep --color=auto postgres
[postgres@docker-slave-79102 12]$ 
[postgres@docker-slave-79102 12]$ vim pg_hba.conf 
[postgres@docker-slave-79102 12]$ pg_ctl reload -D /PG/12 
server signaled
[postgres@docker-slave-79102 12]$ psql
WARNING: password file "/home/postgres/.pgpass" has group or world access; permissions should be u=rw (0600) or less
psql (12.3)
Type "help" for help.

postgres=# \l
                                  List of databases
   Name    |  Owner   | Encoding |   Collate   |    Ctype    |   Access privileges   
-----------+----------+----------+-------------+-------------+-----------------------
 postgres  | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 smart     | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
 template0 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
 template1 | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | =c/postgres          +
           |          |          |             |             | postgres=CTc/postgres
 test      | postgres | UTF8     | en_US.UTF-8 | en_US.UTF-8 | 
(5 rows)

postgres=# lc test
postgres-# \c test
WARNING: password file "/home/postgres/.pgpass" has group or world access; permissions should be u=rw (0600) or less
You are now connected to database "test" as user "postgres".
test-# INSERT INTO Person( ID, NAME, AGE, TALL, WEIGHT) 
test-# VALUES(2,'李四',18,185, 60);
ERROR:  syntax error at or near "lc"
LINE 1: lc test
        ^
test=# INSERT INTO Person( ID, NAME, AGE, TALL, WEIGHT) 


### 最后的话

最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！

### 资料预览

给大家整理的视频资料：

![](https://img-blog.csdnimg.cn/img_convert/bb48696f9d6cdf8951504a5c47dc3c3e.png)

给大家整理的电子书资料：

  

![](https://img-blog.csdnimg.cn/img_convert/e9ee28cfe49c1fa77cc64cf720b55775.png)



**如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！**

**网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。**

**[需要这份系统化的资料的朋友，可以点击这里获取！](https://bbs.csdn.net/topics/618635766)**


**一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**

子书资料：

  

[外链图片转存中...(img-ocSl36Ct-1715870132757)]



**如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！**

**网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。**

**[需要这份系统化的资料的朋友，可以点击这里获取！](https://bbs.csdn.net/topics/618635766)**


**一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**
一个射手座的程序媛
关注
  • 3
    点赞
  • 踩
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Postgresql数据库主从备份教程
书写人生
04-02 1001
数据库主从热备数据库安装PostgreSQL主从流复制部署 数据库安装 安装yum源 打开https://yum.postgresql.org/repopackages.php ，找到自己需要的版本，右键复制链接地址。 不放心是否复制成功的话可以粘贴出来看看。 以root模式进入CentOS7，输入：yum install + 刚刚复制的链接 回车。 输入：y，回车。 安装Postg...
PostgreSQL数据库迁移和迁移策略
互联网知识分享
09-30 1445
在实际应用中，可能需要将数据库从一个环境迁移到另一个环境，例如从开发环境迁移到生产环境，或者从一个物理服务器迁移到另一个物理服务器。物理恢复：将物理备份的数据库文件复制到目标位置，然后使用pg_ctl或pg_upgrade执行数据库的恢复和升级操作。逻辑恢复：使用pg_restore命令执行逻辑恢复，该命令会读取逻辑备份的SQL脚本，并将其应用到目标数据库中。在迁移阶段，需要将备份的数据库导入到目标环境中。迁移方式：选择适合当前情况的迁移方式，例如物理备份和恢复、逻辑备份和恢复、逻辑复制等。
postgreSQL主从部署
最新发布
qq_41270538的博客
12-27 1342
postgresql主从搭建
PG守护进程（Postmaster）——PostgreSQL 12恢复配置总结
肥叔菌的博客
11-18 2151
PostgreSQL V12中没有了recovery.conf。从向后兼容的观点来看，PostgreSQL v12中最大的变化是recovery.conf文件中的参数放到了postgresql.conf配置文件中。 本文主要介绍他们的变化以及如何适应。 放弃recovery.conf 在PG12以前，如果数据目录存在recovery.conf文件，当PG实例启动时将进入恢复模式（recovery或standby）,该文件包含了用于配置恢复的所有参数，例如： standby_mode：确定这是正常的归档恢复还
postgresql主从复制、主从切换
I'm the best ！！！
06-24 9971
从PostgreSQL 12开始，在执行通过流复制来配置主备数据库的时候，不再需要配置额外配置recovery.conf文件了。取而代之的是在备库环境的$PGDATA路径下配置一个standby.signal文件，注意该文件是1个普通的文本文件，内容为空。理解起来就是，该文件是一个标识文件。如果备库通过执行pg_ctl promote提升为主库的话，那么该文件将自动消失。PostgreSQL 9.4.10版本： PostgreSQL 12.8版本： 从对比中，可以看到在9.4.10版本中，-R选项用于创建r
pg数据库安装&主从配置
weixiaoya0204的博客
05-24 3189
环境: OS:CentOs 7 Postgres-11.2 源码编译 安装依赖包 yum -y install readline yum -y install gcc yum -y install -y readline-devel yum install zlib-devel 编译安装 [root@localhost ]# tar -xvf postgresql-11.2.tar.gz [root@localhost ]#mkdir -p /opt/postgresql-11.6 [root@loc
pg数据库安装主从.docx
09-07
_pg数据库安装主从_ pg数据库安装主从是指在 Centos 7.7 64 位操作系统上安装 PostgreSQL 数据库主从(replication)架构。该架构由两台机器组成，分别充当主数据库(master)和从数据库(slave)角色。 环境介绍及准备...
Postgres-XL集群部署文档2022.docx
03-12
Postgres-XL是一个高度可扩展的开源SQL数据库集群，它基于PostgreSQL并专注于处理复杂的数据库工作负载，包括完全ACID事务一致性、OLTP（在线事务处理）和OLAP（在线分析处理）应用。Postgres-XL引入了MPP（大规模...
vscode-postgres-master.zip_FT1_extension_postgres_vscode_vsix
09-21
标题中的"vscode-postgres-master.zip_FT1_extension_postgres_vscode_vsix"表明这是一个与Visual Studio Code（VSCode）相关的扩展，特别设计用于支持PostgreSQL数据库。"FT1"可能是扩展的版本号或者特定的标识符，...
postgres-xl数据库集群安装部署说明手册
01-30
postgres-xl9.5数据库集群安装部署说明手册 包括：安装环境说明、依赖项说明、以及postgres-xl数据库编译说明、节点划分说明、以及手动方式部署启动集群及使用验证；自动方式部署启动集群等。
Postgres-10.12.1v-20200803.tar.gz
08-03
PG提供了多种工具来实现数据迁移，如pg_dump和pg_restore用于备份和恢复，以及pg_upgrade用于在不同版本间升级数据库。在这个一键安装包中，可能已经预设了这些工具的使用方法，简化了数据迁移的过程。 此外，...
Postgresql实现主从复制，读写分离
热门推荐
小米吃辣椒的博客
01-29 2万+
前言 简单记录一下postgresql主从的实现方式之一——基于Standby的异步流复制，这是PostgreSQL9.x版本（2010.9）之后提供的一个很nice的功能，类似的功能在Oracle中是11g之后才提供的active dataguard和SQL Server 2012版本之后才提供的日志传送，此处再次为pg鼓掌，确实是一个很棒的开源数据库。废话不多说，本篇blog就详细记录一下在...
【postgres】postgres 数据库迁移
東₂₀₂₃²⁰²³
06-15 5311
postgres 9.6 数据库迁移
postgresql 测试库和生产库2个数据库之间在线导数据
甲鱼大哥的专栏
08-19 1814
用pg_dump但不产生中间文件，直接在2个数据库之间导数据。本机执行从本地库导出数据到远程库pg_dump -h 127.0.0.1 -U postgres dbname | psql -h remotehost -U postgres dbname本机执行从远程数据库导入数据到本地库pg_dump -h remotehost -U postgres dbname | psql -h 127.0.
Postgresql12主从配置及切换
luxingjyp的专栏
03-04 8445
一、主从安装 1、依据“Centos7安装最新版Postgresql”操作，注意个别细节选择主从配置 2、注意：从服务器只能查询，不能写入 3、主库IP=103，备库IP=104 二、主服务器 1、添加pg用于同步的用户名 su - postgres psql # 创建具有复制流操作的用户：replica CREATE ROLE replica login replicat...
PostgreSQL数据库主从部署
从入门到放弃
08-15 1万+
一、基础环境 1、操作系统：CentOS 7.3 2、PostgreSQL：10.3 3、主节点：192.168.0.101 从节点：192.168.0.102 二、部署主从 1、安装postgreSQL 主节点与从节点均安装postgreSQL，安装方法参考博客：CentOS系统下PostgreSQL数据库安装配置 2、配置主从 主节点（192.168.0.101）配置 （1）...
PostgreSQL主从库搭建
syx4410177的博客
12-16 2105
PostgreSQL主从库搭建主备环境说明数据库安装主库配置创建用户配置pg_hba.conf配置postgresql.conf配置recovery.conf重启主数据库从数据库配置pg_basebackup 创建备库配置pg_hba.conf配置postgresql.conf配置recovery.conf启动从数据库验证主从配置 主备环境说明 数据库 地址 端口 数据文件位置 主库 10.0.0.42 5432 /app/pgdata 从库 10.0.0.43 5433 /app/pg
Postgresql主从配置
jiangbb8686的博客
03-15 646
一、简介 PostgreSql在9.0之后引入了主从的流复制机制，所谓流复制，就是从服务器通过tcp流从主服务器中同步相应的数据。这样当主服务器数据丢失时从服务器中仍有备份。 与基于文件日志传送相比，流复制允许保持从服务器更新。 从服务器连接主服务器，其产生的流WAL记录到从服务器， 而不需要等待主服务器写完WAL文件(关于Wal可以看看官方的说法https://www.postgres...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值