五,复制集

一,概念

mongodb复制集是一主多从多节点实现数据库集群的方式

1.1作用

首页目标是通过主节点快速的将oplog同步给从节点,并在主节点发生故障的时候进行选举达到数据库的高可用。
除此之外,还有:

  • 数据分发—将数据从一个区域复制到另一个区域,减少另一个区域的读延迟
  • 读写分离—不同类型的压力分别在不同的节点上执行
  • 异地容灾—在数据中心故障时候快速切换到异地
1.2数据分发过程

当一个修改操作,无论是插入、更新或删除,到达主节点时,它对数据的操作将被
记录下来(经过一些必要的转换),这些记录称为 oplog。

从节点通过在主节点上打开一个 tailable 游标不断获取新进入主节点的 oplog,并
在自己的数据上回放,以此保持跟主节点的数据一致。

1.3选举过程
  • 具有投票权的节点之间两两互相发送心跳;
  • 当5次心跳未收到时判断为节点失联;
  • 如果失联的是主节点,从节点会发起选举,选出新的主节点;
  • 如果失联的是从节点则不会产生新的选举;
  • 选举基于 RAFT一致性算法 实现,选举成功的必要条件是大多数投票节点存活;
  • 复制集中最多可以有50个节点,但具有投票权的节点最多7个。

影响选举的因素:

  • 整个集群必须有大多数节点存活;
  • 被选举为主节点的节点必须:
    1, 能够与多数节点建立连接
    2,具有较新的 oplog
    3,具有较高的优先级(如果有配置)

二,部署

准备3份配置文件mongo1.conf,mongo2.conf,mongo3.conf

将端口号分别设置为28017/28018/28019

3个数据目录:
/root/mongo/data/db1
/root/mongo/data/db2
/root/mongo/data/db3

3个日志文件路径:
/root/mongo/data/db1/mongod.log
/root/mongo/data/db2/mongod.log
/root/mongo/data/db3/mongod.log

分别修改下面的配置

systemLog:
 destination: file
 path: /root/mongo/data/db1/mongod.log # log path
 logAppend: true
storage:
 dbPath: /root/mongo/data/db1 # data directory
net:
 bindIp: 0.0.0.0
 port: 28017 # port
replication:
 replSetName: rs0
processManagement:
 fork: true

启动:

mongod -f mongo1.conf
mongod -f mongo2.conf
mongod -f mongo3.conf

//进入第一个mongo
mongo --port 28017

//在mongo shell,初始化复制集并将节点加入复制集
rs.initiate({
  _id: "rs0",
  members: [{
    _id: 0,
    host: "localhost:28017"
  },{
    _id: 1,
    host: "localhost:28018"
  },{
    _id: 2,
    host: "localhost:28019"
  }]
})

//mongo shell,查看整个复制集群状态
rs.status()
//返回,具体含义:https://docs.mongodb.com/manual/reference/command/replSetGetStatus/#dbcmd.replSetGetStatus
{
        "set" : "rs0",
        "date" : ISODate("2021-01-19T17:57:06.050Z"),//复制集当前时间,可以通过和members[n].lastHeartbeat比对来确定节点延迟
        "myState" : 1,//0-10来代表节点不同状态,具体意思:https://docs.mongodb.com/manual/reference/replica-states/
        "term" : NumberLong(1),//投票计数器
        "syncSourceHost" : "",
        "syncSourceId" : -1,
        "heartbeatIntervalMillis" : NumberLong(2000),
        "majorityVoteCount" : 2,
        "writeMajorityCount" : 2,
        "votingMembersCount" : 3,
        "writableVotingMembersCount" : 3,
        "optimes" : {
                "lastCommittedOpTime" : {//当前节点视角,最后已写入大多数副本集成员的最新操作的信息
                        "ts" : Timestamp(1611079016, 1),
                        "t" : NumberLong(1)
                },
                "lastCommittedWallTime" : ISODate("2021-01-19T17:56:56.332Z"),
                "readConcernMajorityOpTime" : {
                        "ts" : Timestamp(1611079016, 1),
                        "t" : NumberLong(1)
                },
                "readConcernMajorityWallTime" : ISODate("2021-01-19T17:56:56.332Z"),
                "appliedOpTime" : {//最后应用于当前节点操作信息
                        "ts" : Timestamp(1611079016, 1),
                        "t" : NumberLong(1)
                },
                "durableOpTime" : {//最后写入当前节点日志操作信息
                        "ts" : Timestamp(1611079016, 1),
                        "t" : NumberLong(1)
                },
                "lastAppliedWallTime" : ISODate("2021-01-19T17:56:56.332Z"),
                "lastDurableWallTime" : ISODate("2021-01-19T17:56:56.332Z")
        },
        "lastStableRecoveryTimestamp" : Timestamp(1611078996, 1),
        "electionCandidateMetrics" : {
                "lastElectionReason" : "electionTimeout",
                "lastElectionDate" : ISODate("2021-01-19T17:51:36.306Z"),
                "electionTerm" : NumberLong(1),
                "lastCommittedOpTimeAtElection" : {
                        "ts" : Timestamp(0, 0),
                        "t" : NumberLong(-1)
                },
                "lastSeenOpTimeAtElection" : {
                        "ts" : Timestamp(1611078684, 1),
                        "t" : NumberLong(-1)
                },
                "numVotesNeeded" : 2,
                "priorityAtElection" : 1,
                "electionTimeoutMillis" : NumberLong(10000),
                "numCatchUpOps" : NumberLong(0),
                "newTermStartDate" : ISODate("2021-01-19T17:51:36.319Z"),
                "wMajorityWriteAvailabilityDate" : ISODate("2021-01-19T17:51:37.461Z")
        },
        "members" : [
                {
                        "_id" : 0,
                        "name" : "localhost:28017",
                        "health" : 1,
                        "state" : 1,
                        "stateStr" : "PRIMARY",
                        "uptime" : 783,
                        "optime" : {
                                "ts" : Timestamp(1611079016, 1),
                                "t" : NumberLong(1)
                        },
                        "optimeDate" : ISODate("2021-01-19T17:56:56Z"),
                        "syncSourceHost" : "",
                        "syncSourceId" : -1,
                        "infoMessage" : "",
                        "electionTime" : Timestamp(1611078696, 1),
                        "electionDate" : ISODate("2021-01-19T17:51:36Z"),
                        "configVersion" : 1,
                        "configTerm" : 1,
                        "self" : true,
                        "lastHeartbeatMessage" : ""
                },
                {
                        "_id" : 1,
                        "name" : "localhost:28018",
                        "health" : 1,
                        "state" : 2,
                        "stateStr" : "SECONDARY",
                        "uptime" : 341,
                        "optime" : {
                                "ts" : Timestamp(1611079016, 1),
                                "t" : NumberLong(1)
                        },
                        "optimeDurable" : {
                                "ts" : Timestamp(1611079016, 1),
                                "t" : NumberLong(1)
                        },
                        "optimeDate" : ISODate("2021-01-19T17:56:56Z"),
                        "optimeDurableDate" : ISODate("2021-01-19T17:56:56Z"),
                        "lastHeartbeat" : ISODate("2021-01-19T17:57:04.311Z"),
                        "lastHeartbeatRecv" : ISODate("2021-01-19T17:57:05.814Z"),
                        "pingMs" : NumberLong(0),
                        "lastHeartbeatMessage" : "",
                        "syncSourceHost" : "localhost:28017",
                        "syncSourceId" : 0,
                        "infoMessage" : "",
                        "configVersion" : 1,
                        "configTerm" : 1
                },
                {
                        "_id" : 2,
                        "name" : "localhost:28019",
                        "health" : 1,
                        "state" : 2,
                        "stateStr" : "SECONDARY",
                        "uptime" : 341,
                        "optime" : {
                                "ts" : Timestamp(1611079016, 1),
                                "t" : NumberLong(1)
                        },
                        "optimeDurable" : {
                                "ts" : Timestamp(1611079016, 1),
                                "t" : NumberLong(1)
                        },
                        "optimeDate" : ISODate("2021-01-19T17:56:56Z"),
                        "optimeDurableDate" : ISODate("2021-01-19T17:56:56Z"),
                        "lastHeartbeat" : ISODate("2021-01-19T17:57:04.312Z"),
                        "lastHeartbeatRecv" : ISODate("2021-01-19T17:57:05.815Z"),
                        "pingMs" : NumberLong(0),
                        "lastHeartbeatMessage" : "",
                        "syncSourceHost" : "localhost:28017",
                        "syncSourceId" : 0,
                        "infoMessage" : "",
                        "configVersion" : 1,
                        "configTerm" : 1
                }
        ],
        "ok" : 1,
        "$clusterTime" : {
                "clusterTime" : Timestamp(1611079016, 1),
                "signature" : {
                        "hash" : BinData(0,"AAAAAAAAAAAAAAAAAAAAAAAAAAA="),
                        "keyId" : NumberLong(0)
                }
        },
        "operationTime" : Timestamp(1611079016, 1)
}

从节点默认是备份节点,无法读取数据,将从节点设置成可读从节点

rs.slaveOk()//旧版本
rs.secondaryOk()//新版本

尝试主节点写入,从节点读取:

//主
mongo localhost:28017
db.test.insert({ a:1 })

//从
mongo localhost:28018
db.test.find()
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 214,504评论 6 496
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,434评论 3 389
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 160,089评论 0 349
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,378评论 1 288
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,472评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,506评论 1 292
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,519评论 3 413
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,292评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,738评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,022评论 2 329
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,194评论 1 342
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,873评论 5 338
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,536评论 3 322
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,162评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,413评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,075评论 2 365
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,080评论 2 352

推荐阅读更多精彩内容