pgsql主从流复制PostgreSQL流复制 原理机制 参考--https://yq.aliyun.com/articles/51009
主备总体结构 PG主备流复制的核心部分由walsender,walreceiver和startup三个进程组成。
walsender进程是用来发送WAL日志记录的 walreceiver进程是用来接收WAL日志记录的 startup进程是用来apply日志的 配置环境 主机名 IP地址 角色 数据目录 postgres202 192.168.1.202 primary /home/postgres/data postgres203 192.168.1.203 standby /home/postgres/data 同步类型 异步方式 同步方式 【异步方式配置】 复制代码 主数据库配置
- 主机192.168.1.202 1.1 首先需要配置一个账号进行主从同步。 创建replica用户设置密码,登录和备份权限。 CREATE ROLE replica login replication encrypted password 'replica'
1.2 修改pg_hba.conf,增加replica用户,进行同步。 host replication replica 192.168.1.0/24 md5 这样,就设置了replica这个用户可以从192.168.1.0对应的网段进行流复制请求。
1.3 修改postgresql.conf,注意设置下下面几个地方: wal_level = hot_standby # 这个是设置主为wal的主机 max_wal_senders = 5 # 这个设置了可以最多有几个流复制连接,差不多有几个从,就设置几个 wal_keep_segments = 128 # 设置流复制保留的最多的xlog数目 wal_sender_timeout = 60s # 设置流复制主机发送数据的超时时间 max_connections = 100 # 这个设置要注意下,从库的max_connections必须要大于主库的
1.4 重启主库
- 备数据库配置 主机192.168.1.203 2.1 使用pg_basebackup建备库 pg_basebackup -F p --progress -D /home/postgres/data -h 192.168.1.202 -p 5432 -U replica --password 这里使用了pg_basebackup这个命令,/home/postgres/data这个目录是空的 成功之后,就可以看到这个目录中现有的文件都是一样的了。
2.2 进入到/home/postgres/data目录,修改recovery.conf,只要修改几个地方就行了 standby_mode = on # 这个说明这台机器为从库 primary_conninfo = 'host=192.168.1.202 port=5432 user=replica password=replica' # 这个说明这台机器对应主库的信息 recovery_target_timeline = 'latest' # 这个说明这个流复制同步到最新的数据
2.3 postgresql.conf中也有几个地方要进行修改 max_connections = 200 # 一般查多于写的应用从库的最大连接数要比较大 hot_standby = on # 说明这台机器不仅仅是用于数据归档,也用于数据查询 max_standby_streaming_delay = 30s # 数据流备份的最大延迟时间 wal_receiver_status_interval = 10s # 多久向主报告一次从的状态,当然从每次数据复制都会向主报告状态,这里只是设置最长的间隔时间 hot_standby_feedback = on # 如果有错误的数据复制,是否向主进行反馈
2.4 启动备
【主库】查看配置结果 postgres=# select * from pg_stat_replication ; -[ RECORD 1 ]----+------------------------------ pid | 1793 usesysid | 24576 usename | replica application_name | walreceiver client_addr | 192.168.1.203 client_hostname | client_port | 32250 backend_start | 2017-09-01 22:23:16.924496+08 backend_xmin | 1676 state | streaming sent_location | 0/60003E0 write_location | 0/60003E0 flush_location | 0/60003E0 replay_location | 0/60003E0 sync_priority | 0 sync_state | async
复制代码 【异步更改为同步方式】
复制代码
-
主数据库配置 主机192.168.1.202 1.1 修改postgresql.conf synchronous_standby_names = 'standby01'
-
备数据库配置 主机192.168.1.203 2.2 vi recovery.conf standby_mode = on primary_conninfo = 'application_name=standby01 host=192.168.1.202 port=5432 user=replica password=replica' recovery_target_timeline = 'latest
3.重启动主备库
【主库】查看 postgres=# select * from pg_stat_replication ; -[ RECORD 1 ]----+---------------------------- pid | 1706 usesysid | 24576 usename | replica application_name | standby01 client_addr | 192.168.1.203 client_hostname | client_port | 59550 backend_start | 2017-09-01 23:36:05.7176+08 backend_xmin | 1676 state | streaming sent_location | 0/70000D0 write_location | 0/70000D0 flush_location | 0/70000D0 replay_location | 0/70000D0 sync_priority | 1 sync_state | sync
也可以用以下方法,类似: 0. Stop postgresql on standby standby# /etc/init.d/postgresql stop
-
invoke pg_start_backup() on master master# sudo -u postgres psql -c "SELECT pg_start_backup('2011-08-15_04:49)"
-
remove data files on standby standby# cd /var/lib/postgresql/9.0/main standby# /bin/rm -rf base pg_* standby# mkdir pg_xlog; chown postgres.postgres pg_xlog; chmod 700 pg_xlog
-
copy data files master# rsync -av --delete /var/lib/postgresql/9.0/main --exclude=pg_xlog --exclude=postmaster.pid --exclude=server.crt --exclude=server.key /path/to/standby/data/directory
-
invoke pg_stop_backup() on master master# sudo -u postgres psql -c "SELECT pg_stop_backup()"
-
start postgresql on standby standby# /etc/init.d/postgresql start