mongodb分片集群的安装

火山日常啰嗦
前面两篇讲了mongodb单机版的安装和复制集的配置,接下来我会讲到mongodb分片集群的安装配置,因为分片集群的基础就是复制集,所以我前面先记录了复制集的安装再来讲分片集群的安装。

分片集群的安装涉及到四个组件:
mongos(路由服务)、config server(配置服务)、shard(分片)、replica set(复制集)
下面是我配置的分片集群中这些组件的数量及分布情况:
1)2个复制集rsa0、rsa1
每个复制集有2个mongod服务(理论上有一主一从就可以成为集群)
采用水平方式配置(即每个复制集的mongod服务分别部署在不同的节点上)
每个复制集的mongod服务分别在节点172.18.149.132、172.18.149.133
2)2个config server,分别分布在172.18.149.131、172.18.149.132
3)一个mongos路由服务,分布在172.18.149.131

ps:当然,复制集的数量不一定非得为2,这是根据你的集群规模来配置的
而每个复制集的mongod服务也不一定得为2,因为我的节点数为3,其中一个节点我就想纯粹地
用来作为config server和mongos服务的节点,所以每个分片集的mongod服务数量我就设为2了,
让它们均匀地分布在另两台节点上。
mongos服务是路由服务,只需一个就够了。

安装步骤:
1、

准备工作:
1)分别在172.18.149.132、172.18.149.133节点上创建这两个目录,这是存放复制集数据的目录:

mkdir -p  /opt/modules/mongodb/data/rsa0  
mkdir -p  /opt/modules/mongodb/data/rsa1 

2)分别在172.18.149.132、172.18.149.133节点上创建这两个目录,这是存放每个复制集log日志的目录:

mkdir -p  /opt/modules/mongodb/log/log0
 mkdir -p  /opt/modules/mongodb/log/log1

3)在172.18.149.131节点上创建:
这是config server1的配置路径

 mkdir -p /opt/modules/mongodb/data/config_serv1
  mkdir -p /opt/modules/mongodb/log/config_serv1_log

这是mongos的配置路径

   mkdir -p /opt/modules/mongodb/log/mongos_log

4)在172.18.149.132节点创建:
这是config server2的配置路径

  mkdir -p /opt/modules/mongodb/data/config_serv2
  mkdir -p /opt/modules/mongodb/log/config_serv2_log

rsa0的配置:

172.18.149.132节点
mongod2.conf

dbpath=/opt/modules/mongodb/data/rsa0
logpath=/opt/modules/mongodb/log0/mongodb1_rsa0.log
smallfiles=true
replSet=rsa0
logappend=true
bind_ip=0.0.0.0
fork=true
port=27017

172.18.149.133节点
mongod3.conf

dbpath=/opt/modules/mongodb/data/rsa0
logpath=/opt/modules/mongodb/log0/mongodb2_rsa0.log
smallfiles=true
replSet=rsa0
logappend=true
bind_ip=0.0.0.0
fork=true
port=27017

rsa0的初始化:

rs.initiate( {
    _id:'rsa0', 
    members: 
    [
      {
        _id:0,
        host:'172.18.149.132:27017'
         },
         {
         _id:1,
         host:'172.18.149.133:27017'
          }
        ]
});

rsa1的配置:

172.18.149.132节点
mongod2.conf

dbpath=/opt/modules/mongodb/data/rsa1
logpath=/opt/modules/mongodb/log1/mongodb1_rsa1.log
smallfiles=true
replSet=rsa1
logappend=true
bind_ip=0.0.0.0
fork=true
port=27018

172.18.149.133节点
mongod3.conf

dbpath=/opt/modules/mongodb/data/rsa1
logpath=/opt/modules/mongodb/log1/mongodb2_rsa1.log
smallfiles=true
replSet=rsa1
logappend=true
bind_ip=0.0.0.0
fork=true
port=27018

rsa1的初始化:

rs.initiate( {
    _id:'rsa1', 
    members: 
    [
       {
        _id:0,
        host:'172.18.149.132:27018'
         },
         {
         _id:1,
         host:'172.18.149.133:27018'
          }
        ]
});

2个复制集已成功创建。

2、创建config server的复制集:
ps:也要声明属于config server自己的复制集名称,confi server的复制集名称我定为rsa

172.18.149.131
configServer1.conf

port=27019
dbpath=/opt/modules/mongodb/data/config_serv1
logpath=/opt/modules/mongodb/log/config_serv1_log/mongodb1_rsa_27019.log
logappend=true
fork=true
configsvr=true
smallfiles=true
replSet=rsa
bind_ip=0.0.0.0

172.18.149.132
configServer2.conf

port=27019
dbpath=/opt/modules/mongodb/data/config_serv2
logpath=/opt/modules/mongodb/log/config_serv2_log/mongodb2_rsa_27019.log
logappend=true
fork=true
configsvr=true
smallfiles=true
replSet=rsa
bind_ip=0.0.0.0

初始化config server复制集:

rs.initiate(
  {
    _id: "rsa",
    configsvr: true,
    members: [
      { _id:0, host:"172.18.149.131:27019" },
      { _id:1, host:"172.18.149.132:27019" }
    ]
  }
)

ps:到此,我想先说一句,因为我在前面已经说过了,分片集群是基于复制集创建的,所以我这个过程都是基于这句话展开的,先配好所有的复制集并初始化。

3、将config server复制集在mongos路由服务中注册:
mongos_route.conf

logappend=true
fork=true
port=30000
configdb=rsa/172.18.149.131:27019,172.18.149.132:27019   //这就是config server在mongos中的注
                                                                                                  //册信息
bind_ip=0.0.0.0

启动mongos服务

4、mongos服务启动后,在172.18.149.131启动mongo shell,端口30000,连接上本地的mongos服务

bin/mongos --port 30000

5、添加分片
在连接mongos的客户端操作

sh.addShard('rsa0/172.18.149.132:27017,172.18.149.132:27017');
sh.addShard('rsa1/172.18.149.133:27018,172.18.149.133:27018');

到这一步分片集群其实已经搭建完毕了。

通过sh.status();查看分片集群状态。

6、测试
1)添加待分片的数据库(以test数据库为例)

sh.enableSharding("test");

2)添加待分库的表(以test库的t1表为例,key为name,ps:表中用于表分片的key所对应的字段必须建有索引,否则分片失败)

sh.shardCollection("test.t1",{name:1})

3)查看分片结果,sh.status()
4)在mongos的客户端往t1中添加数据,然后再在分片所在的目标节点上查看是否有新添加的数据,若有,则说明分片集群真正搭建成功了。

总结:我搭建分片集群的层次是很清晰的:
1)先分别创建shard复制集以及config server复制集
2)再在mongos中注册config server的信息
3)通过mongos添加分片
这样,原本是分散的毫无关系的复制集就成为一个集群了。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,547评论 6 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,399评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,428评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,599评论 1 274
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,612评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,577评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,941评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,603评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,852评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,605评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,693评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,375评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,955评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,936评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,172评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 43,970评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,414评论 2 342

推荐阅读更多精彩内容