基于 docker 的 postgres 主从流复制部署

1、背景

利用 postgres 作为 kong 的持久性存储,出于保证数据库可靠性的考虑,对 postgres 做冷热备份。

2、环境

192.168.14.187 部署主数据库
192.168.14.34 部署从数据库

3、安装部署

3.1 主服务器

利用 docker 搭建 postgres 服务器

docker run -d --name kong-database \
-p 5432:5432 \
-e "POSTGRES_USER=kong" \
-e "POSTGRES_DB=kong" \
-v /home/work/data/postgres:/var/lib/postgresql/data \
postgres:9.4

-v : 建立数据卷,将 docker 内的文件系统挂载到宿主机上, linux 目录:/home/work/data/postgres, docker 容器对应的路径 /var/lib/postgresql/data

1、进入启动的 docker 容器内部,新建用于归档日志的目录

docker exec -it kong-database /bin/bash
mkdir -p /var/lib/postgresql/data/pg_archive

2、进入 postgres 客户端,新建用于同步数据的用户

# 切换到 postgres 用户
su postgres 
# 进去 postgres 客户端
psql
进入 postgres 客户端
CREATE ROLE replica login replication encrypted password 'replica';

注:注意语句最后添加分号
创建用户成功之后,控制台会显示 "CREATE ROLE",利用 \du 命令可以查看 postgres 的用户列表

查看用户列表

通过 \q 退出 postgres 控制台,并通过 exit 退出 postgres 用户
3、修改 pg_hba.conf 文件
修改 pg_hba.conf 文件,允许刚创建的 replica 用户从 192.168.14.34 从服务器上连接主服务器。

vi /var/lib/postgresql/data/pg_hba.conf
vi 未安装

如上显示 vi 命令没有安装,通过如下命令进行安装

apt-get update
apt-get install vim

安装成功之后,再次修改 pg_hba.conf 文件,进入最后部分,添加如下:

host   replication      replica       192.168.14.34/32          trust   #允许  14.34 机器使用 replica 用户来复制

4、修改 postgresql.conf

listen_addresses = '*'   # 监听所有IP
archive_mode = on  # 允许归档
archive_command = 'cp %p /var/lib/postgresql/data/pg_archive/%f'  # 用该命令来归档logfile segment
wal_level = hot_standby #开启热备
max_wal_senders = 32 # 这个设置了可以最多有几个流复制连接,差不多有几个从,就设置几个
wal_keep_segments = 64 # 设置流复制保留的最多的xlog数目,一份是 16M,注意机器磁盘 16M*64 = 1G
wal_sender_timeout = 60s # 设置流复制主机发送数据的超时时间
max_connections = 100 # 这个设置要注意下,从库的max_connections必须要大于主库的

5、重启容器
通过 exit 命令退出容器,并重启启动容器

docker restart kong-database

3.2 从服务器

同样利用 docker 在 192.168.14.34 机器上新建一个 postgres 容器

docker run -d --name kong-database \
-p 5432:5432 \
-e "POSTGRES_USER=kong" \
-e "POSTGRES_DB=kong" \
-v /home/work/data/postgres:/var/lib/postgresql/data \
postgres:9.4

1、拷贝主服务器数据
通过 docker exec -it kong-database /bin/bash 进入容器内部,拷贝主服务器数据

su postgres # 切换 postgres 用户
rm -rf /var/lib/postgresql/data/* # 清楚从库数据
pg_basebackup -h 192.168.14.187 -U replica -D /var/lib/postgresql/data -X stream -P
mkdir -p /var/lib/postgresql/data/pg_archive

执行完上述命令之后,容器自动退出

拷贝主服务器数据

切换到宿主机的 root 账户,进入 /home/work/data/postgres 目录。
2、添加 recovery.conf 文件
通过 vi /home/work/data/postgres/recovery.conf添加恢复文件。

standby_mode = on    # 说明该节点是从服务器
primary_conninfo = 'host=192.168.14.187 port=5432 user=replica password=replica'  # 主服务器的信息以及连接的用户
recovery_target_timeline = 'latest'

3、修改 postgresql.conf
vi /home/work/data/postgres/postgresql.conf

wal_level = hot_standby
max_connections = 1000 # 一般查多于写的应用从库的最大连接数要比较大
hot_standby = on # 说明这台机器不仅仅是用于数据归档,也用于数据查询
max_standby_streaming_delay = 30s # 数据流备份的最大延迟时间
wal_receiver_status_interval = 10s # 多久向主报告一次从的状态,当然从每次数据复制都会向主报告状态,这里只是设置最长的间隔时间
hot_standby_feedback = on # 如果有错误的数据复制,是否向主进行反馈

4、启动容器
通过 docker start kong-database 再次启动容器

4 校验主从部署

到 192.168.14.187 主服务器地址上校验主从是否部署成功
通过 docker exec -it kong-database /bin/bash 进入容器内部

su postgres
psql

通过上诉命令进入 postgres 控制台,然后执行:

select client_addr,sync_state from pg_stat_replication;

得到如下结果:

postgres=# select client_addr,sync_state from pg_stat_replication;
  client_addr  | sync_state 
---------------+------------
 192.168.14.34 | async
(1 row)

主从配置成功

转载整理自
[1]: postgresql9.5主从hot_standby模式配置
[2]: PostgreSQL主从流复制部署

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 227,882评论 6 531
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 98,208评论 3 414
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 175,746评论 0 373
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 62,666评论 1 309
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 71,477评论 6 407
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 54,960评论 1 321
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 43,047评论 3 440
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 42,200评论 0 288
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 48,726评论 1 333
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 40,617评论 3 354
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 42,807评论 1 369
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 38,327评论 5 358
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 44,049评论 3 347
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 34,425评论 0 26
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 35,674评论 1 281
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 51,432评论 3 390
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 47,769评论 2 372

推荐阅读更多精彩内容

  • 五、Docker 端口映射 无论如何,这些 ip 是基于本地系统的并且容器的端口非本地主机是访问不到的。此外,除了...
    R_X阅读 1,772评论 0 7
  • linux 查看系统版本确认使用的docker版本 uname -a --查看Linux内核版本命令cat /pr...
    只有香如故阅读 1,240评论 1 4
  • About:PostgreSQL About 《PostgreSQL 源码分析系列》 PostgreSQL 源码分...
    ty4z2008阅读 8,215评论 1 40
  • 转载自 http://blog.opskumu.com/docker.html 一、Docker 简介 Docke...
    极客圈阅读 10,520评论 0 120
  • 今晚出去吃饭,从公司走的时候太匆忙,结果忘了带钥匙,回到家才发现,幸好还有两位同住的人,于是给他们打电话,说起来真...
    苏步哲阅读 153评论 0 0