postgresql 同步流复制以及主备切换

同步流复制
搭建参考
master: 172.17.0.3
standby01:172.17.0.8
standby02:172.17.0.9

docker stop pg_hot_standby02
docker stop pg_hot_standby01
docker stop pg_hot_master

docker rm -f pg_hot_master

主库 172.17.0.3

docker run -itd --privileged -v /sys/fs/cgroup:/sys/fs/cgroup -p 50000:5432 --name pg_hot_master centos_pg /usr/sbin/init

docker exec -it pg_hot_master /bin/bash

cd /var/lib/pgsql/9.6/data/

create user repli replication password '123456';

在主库上修改pg_hba.conf:
host replication repli 0.0.0.0/0 md5

修改postgresql.conf :
max_wal_senders = 10
wal_level = hot_standby
wal_keep_segments = 32
hot_standby = on
synchronous_standby_names ='standby01,standby02'

不设置hot_standby = on 不能访问,错误如下:
[postgre@pg-2 postgresql-9.4.4]$ psql postgres
psql: FATAL: the database system is starting up
synchronous_standby_names设置的'standby01,standby02'就是在Standby数据库中配置连接参数“application_name”。

/usr/pgsql-9.6/bin/pg_ctl restart -- 重新配置主库

备库 172.17.0.8 172.17.0.9

docker run -itd --privileged -v /sys/fs/cgroup:/sys/fs/cgroup -p 50001:5432 --name pg_hot_standby01 centos_pg /usr/sbin/init
docker exec -it pg_hot_standby01 /bin/bash

docker run -itd --privileged -v /sys/fs/cgroup:/sys/fs/cgroup -p 50002:5432 --name pg_hot_standby02 centos_pg /usr/sbin/init
docker exec -it pg_hot_standby02 /bin/bash

在每一备库做如下处理:

cd /var/lib/pgsql/9.6/data/
rm -rf /var/lib/pgsql/9.6/data/ -- 清空data文件夹
su - postgres
pg_basebackup -h 172.17.0.3 -U repli -F p -P -x -R -D /var/lib/pgsql/9.6/data -l backup20180321 --从主库做基础备份,数据文件和配置文件都将复制到备库

对于备库 IP是主库的ip
修改recovery.conf:
standby_mode = 'on'
primary_conninfo = 'user=repli password=123456 host=172.17.0.3 port=5432 sslmode=disable sslcompression=1 application_name=standby02'
trigger_file ='/var/lib/pgsql/9.6/data/trigger.1921'
recovery_target_timeline = 'latest'

/usr/pgsql-9.6/bin/pg_ctl start -- 启动备库

系统信息

select * from pg_stat_replication;
select pg_is_in_recovery();--主库是false 备库是true

总结:只要一个备库正常工作,主库以及备库同步,当坏的备库修复后,遗失的数据可以自动补充。
当两个备库都不能正常工作, 主库语句会等待,长时间不结束

当主库停止工作后, 备库不会自动切换为主库,备库可以查询,但是不可以写数据,错误如下:
ERROR: cannot execute INSERT in a read-only transaction

主备切换

主备切换

如何区别主库和备库

  1. ps -ef | grep wal
    wal 日志发送进程"wal sender process",说明是主库。
    wal 日志接收进程"wal receiver process" ,说明是备库;

  2. 安装pg_controldata 查看输出
    pg_controldata 输出数据库服务的当前状态,可以根据 "Database cluster state: " 的信息来判断,
    如果值为 "in production" 说明是主库,如果值为 "in archive recovery" 说明是备库。

[postgres@pg1 pg_root]$ pg_controldata
pg_control version number: 903
Catalog version number: 201105231
Database system identifier: 5640897481082175487
Database cluster state: in production
...

  1. select pg_is_in_recovery();--主库是false 备库是true

recovery.conf 修改配置

standby_mode = '' --标记PG为STANDBY SERVER
primary_conninfo = '' --标识主库信息
trigger_file = '' --标识触发器文件

备库发现存在trigger_file文件时,就会备库激活为主库。
创建这个 trigger 文件即可。 例如 "touch /opt/pgdata/pg_root/postgresql.trigger.1921 "

修改standby 为主库 配置recovery.conf

  1. 关闭主库 /usr/pgsql-9.6/bin/pg_ctl stop

  2. 在备1执行:touch /var/lib/pgsql/9.6/data/trigger.1921
    发现 recovery.conf 文件变成 recovery.done ,说明备库1成为主库。

  3. 在主库创建 recovery.conf ,修改备库2的 recovery.conf的ip字段 重新启动数据库

查看所有容器的ip

docker inspect -f '{{.Name}} - {{.NetworkSettings.IPAddress }}' $(docker ps -aq)

cat /usr/pgsql-9.6/share/recovery.conf.sample

standby.PNG

推荐阅读更多精彩内容