MySQL 【主从模式(一)】基于binlog文件位置的复制

主从复制

概念

MySQL主从复制,可以将一台MySQL数据库服务器(主)上的数据复制到另外一台或者多台数据库服务器(从)上,保持主从数据的一致性
根据不同的配置,可以选择将主库中的所有数据库、指定数据库或者数据库中的指定表复制到从库中。

作用

MySQL主从复制的作用包括:

    1. 数据备份,高可用性。对数据进行热备份,将主从部署在不同的服务器上。当主库宕机故障,可以快速进行主从切换,提高可用性。
    1. 读写分离,横向扩展,提高性能。将所有的更新操作路由至主库,查询操作路由至从库,进行读写分离。同时可以通过配置多个从库进行扩展,提高查询性能。
    1. 数据安全。在从库上执行备份操作,而不影响主库的数据。也可以配置延迟复制,在出现异常操作时,可以及时进行数据恢复
    1. 数据分析与长距离分发。使用从库进行数据分析和供远端站点使用,而不影响主库的性能。

原理

MySQL的主从复制依赖于MySQL binlog详解与解析工具指南文章中提及的MySQL的binlog功能

  • • 主库将数据变更的语句或者行数据变化,记录到binlog中;
  • • 主库上的dump线程,采集binlog数据与从库的IO线程进行交互;
  • • 从库的IO线程将获取到的数据转储成relaylog文件;
  • • 从库的SQL线程将relaylog中的数据读取出来,并在从库上进行回放。
    主从库相应的线程信息如下图:

主库:


从库:


主从同步模式

异步:MySQL默认的复制模式。主库执行完并写入binlog后,不关心从库是否处理了事务,立即将结果返回给客户端。
在该模式下,无法保证任何事务都被传达到副本,若此时主库宕机崩溃,进行故障转移后出现数据丢失
全同步:当主库提交事务后,要等待所有的从库都提交事务后,才能将结果返回给客户端。
该模式下,可以随时从主库进行故障转移到任何从库,不担心数据丢失。但是可能导致事务的执行时间延长
半同步:介于异步与全同步之间。主库提交事务后,等待至少一个(数量可配)从库收到并记录事务,然后提交事务返回结果。
延迟同步故意配置从库落后于主库指定的时间。
该模式下,可以防止用户在主库上犯错,DBA可以进行数据恢复;可以检查延迟之前的数据库状态

基于binlog文件位置的复制

根据不同的场景,要使用不同的方法来配置主从同步。但是通用的一般步骤如下(不同的场景只是在相应的步骤上进行特定的优化与修改):

  • • 在主库上开启binlog,同时配置唯一的server ID。注意:该操作可能需要重启主库
[mysqld]
  log-bin=mysql-bin
  server-id=1

在配置文件中开启binlog,设置server-id(范围1-2<sup>32</sup> - 1,且不同于其他数据库实例

  • • 在从库上配置唯一server ID。注意:该操作可能需要重启从库。
  • • 在库上创建单独的用户,用于从库读取主库的binlog。
mysql> CREATE USER 'repl'@'%.example.com' IDENTIFIED BY 'password';
mysql> GRANT REPLICATION SLAVE ON *.* TO 'repl'@'%.example.com';
  • 获取主库当前binlog文件及其位置。

mysql> SHOW MASTER STATUS\G
*************************** 1. row ***************************
             File: mysql-bin.000003
         Position: 73
     Binlog_Do_DB: test
 Binlog_Ignore_DB: manual, mysql
Executed_Gtid_Set: 3E11FA47-71CA-11E1-9E33-C80AA9429562:1-5
1 row in set (0.00 sec)

使用SHOW MASTER STATUS语句可以确定二进制文件:mysql-bin.000003,位置:73。
这些信息用来配置从库时,告诉从库开始复制主库的起始点。

  • • 如果主实例已经有数据,需要创建数据快照,将其数据copy到从实例。不同的存储引擎创建数据快照的方法不一样。
    创建数据快照的方法有很多种:MySQL dumpcopy数据库原始数据文件使用第三方工具等,在之后会详细分享不同的方法。
  • 配置从库连接主库

mysql> CHANGE MASTER TO
  ->     MASTER_HOST='source_host_name',
  ->     MASTER_PORT='source_port_num',
  ->     MASTER_USER='replication_user_name',
  ->     MASTER_PASSWORD='replication_password',
  ->     MASTER_LOG_FILE='recorded_log_file_name',
  -> 

MASTER_HOST、MASTER_PORT主库的主机和端口,
MASTER_USER、MASTER_PASSWORD上述步骤中在主库上创建的账号与密码,
MASTER_LOG_FILE、MASTER_LOG_POS上述步骤中获取的主库的二进制文件及位置。

  • 开启同步并查看同步状态
    start slave;开启同步;
    show slave status\G查看同步状态;

至此,配置的主从的一般步骤就完成了。
如果是主库与从库都是新安装,主库没有数据需要copy到从库,使用上述步骤就可以配置成功。
但是如果主库存在数据,或者要将新安装的从库加入到已有的主从关系中,就需要在配置从库连接主库前,进行额外的操作,
主要是根据主库的状态和数据,使用不同的方法将数据copy到从库中,在之后会详细分享不同的方法。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,294评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,493评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,790评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,595评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,718评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,906评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,053评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,797评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,250评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,570评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,711评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,388评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,018评论 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,796评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,023评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,461评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,595评论 2 350

推荐阅读更多精彩内容