RocketMQ 的核心 NameServer

开足码力,码动人生,本文首发公众号【 Craig无忌 】,关注这个一言不合就开车的的代码界老司机
本文 GitHub上已经收录 https://github.com/BeKingCoding/JavaKing , 一线大厂面试核心知识点、我的联系方式和技术交流群,欢迎Star和完善

前言

本文属于《从零开始消息中间件》的系列文章,接着上篇文章《不要和陌生人说话,消息中间件之 Topic》,今天来介绍一下 RocketMQ 的核心组件 NameServer。

这个东西很重要,它要管理集群里所有 Broker 的信息,让使用 MQ 的上下游系统可以通过它感知到集群的情况。

开始消息中间件学习的时候,最好有一个切入点,从而搞清楚它的架构设计细节,然后就可以申请一些机器开始落地部署了。

而 NameServer 非常适合我们入手,因为没有 NameServer 一切都无从谈起,可以说这是 RocketMQ 运行的起点。

正文

01 什么是 NameServer?

NameServer 也称之为路由中心,它的角色主要是为了感知集群里所有的节点与组件,然后配合生产者和消费者,使其能够和 MQ 系统进行通信。

针对目前流行的三种消息中间件 Kafka、 RabbitMQ 和 RocketMQ ,它们对路由中心的实现均有所不同。

Kafka 的路由中心实现相对复杂、混乱,它由 ZooKeeper 以及某个作为 Controller 的 Broker 共同完成的。RabbitMQ 的话是集群每个节点同时也会扮演了路由中心的角色。

而 RocketMQ 是把路由中心抽离出来作为一个独立的 NameServer 角色运行的,因此可以说在路由中心这块,它的架构设计是最清晰明了的。


在这里插入图片描述

02 NameServer 如何进行部署?

一个 RocketMQ 集群必须部署 NameServer,那么有两个问题:

(1)NameServer 需要部署几台?是一台机器还是部署多台?

(2)如果部署多台,它们之间是怎么协同工作?

分析这个问题我们可以想一下,NameServer 是整个集群的路由中心,如果没有了它,生产者往哪个 Broker 投递消息都不知道,没有了它,会很麻烦!

为了保证高可用性,NameServer 必然是需要支持多台部署的。如果 NameServer 就部署一台机器的话,一旦它宕机了会导致 RocketMQ 集体出现故障。

所以多机器部署保证了任何一台 NameServer 宕机,其他机器上的 NameServer 可以继续对外提供服务。

03 Broker 注册到哪个 NameServer 上去?

假如有 10 台 Broker 机器,两台 NameServer 机器,是不是其中 5 台 Broker 会把自己的信息注册到第一台 NameServer 上去,另外 5 台 Broker 把自己的信息注册到第二台 NameServer 上去?

答案是不对的。如果任何一台 NameServer 宕机了,不就导致 5 个 Broker 的信息就没了。每个 Broker 启动时都得向所有的 NameServer 进行注册。也就是说,每台 NameServer 都会有一份集群中所有 Broker 的信息。

04 生产者和消费者如何获取 Broker 信息?

生产者和消费者的系统必须从 NameServer 获取到集群的 Broker 信息然后进行发送与拉取,这个过程有两种办法:

(1)NameServer 每隔一会儿推送 Broker 信息给所有的系统。

(2)生产者和消费者自己每隔一段时间,定时发送请求到 NameServer 去拉取最新的集群 Broker 信息。

相比较而言,肯定是第二种方法更靠谱的。因为如果是 NameServer 主动推送,它怎么知道要推送给哪些系统呢?如果推送失败怎么办呢?

05 如果 Broker 宕机了怎么办?

如果生产者和消费者向一台已经挂了的 Broker 发送或者拉取消息必然是徒劳的,那如何保证 Broker 挂了之后,能够迅速的通知到整个系统的各个组件和上下游呢?

要解决这个问题,靠的就是 Broker 和 NameServer 之间的心跳机制。

每隔 30 秒,Broker 就会向集群里所有的 NameServer 发送心跳连接,告诉它们自己的最新状态,NameServer 接收到之后会更新这个 Broker 的最近一次心跳时间。

然后 NameServer 会每隔 10 秒去检查各个 Broker 的最近一次心跳时间,如果某个 Broker 超过 120 秒都没发送心跳了, 那么就认为这个 Broker 已经挂掉了,NameServer 就知道现在集群中的 Broker 已经少了一台。

对于生产者而言,可以考虑不发送消息到那台 Broker,改成发到其他Broker上去。对于消费者而言,每个 Broker 都有 Slave 节点进行备份,可以继续从 Slave 上去拉取信息从而继续使用。

总结

今天对于RocketMQ 的核心组件 NameServer 的技术分享就到这里了,总结一下,大家最主要需要知道它的:

(1)集群化部署

(2)Broker 全量注册所有 NameServer

(3)30 秒心跳机制和 120 秒故障检查机制

(4)生产者和消费者的容错机制

文末福利

最近各大互联网公司的秋招都陆陆续续开始了,还在找工作的小伙伴可以后台回复关键字进入对应的秋招/内推/面试群,我给大家整理了各大公司的内推通道、简历模板还有历年的笔试题,大家要好好准备哦。还可以帮助大家免费修改简历、模拟面试哦~

关注公众号「Craig无忌」

创作不易,各位的支持和认可,就是我创作的最大动力,我们下篇文章见!

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,684评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,143评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,214评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,788评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,796评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,665评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,027评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,679评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 41,346评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,664评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,766评论 1 331
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,412评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,015评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,974评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,203评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,073评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,501评论 2 343