zookeeper入门第一课:概念和应用场景

1.什么是zookeeper?

zookeeper是apache公司开源的分布式协调服务,整个服务是由多台结点服务器构成。用户通过zookeeper的java客户端与zookeeper交互。zookeeper并没有在服务器端实现任何的分布式同步服务,只提供了一个解决分布式同步的原语集,以便用户自己根据业务来实现分布式同步问题,比如分布式锁,分布式选举等问题。

2.zookeeper特点

  • zookeeper本身也是一个分布式形式存在,集群中建议使用奇数台服务器搭建,比如3,5,7台服务器搭建分zookeeper集群。
  • zookeeper集群中任何一个follower结点都能响应读请求。而写请求必须由leader结点处理。
  • zookeeper将数据全部存储到内存中,读效率很高。但是由于内存限制,不便于储存大量数据。
  • 顺序一致性:保证客户端的请求有序进行。
  • 原子性:保证客户端的请求在每个结点上的原子性,要么成功执行该事务,要么都执行失败。
  • 单一视图:集群中的每个结点的数据模型都一致的,对于用户而已视图是一样的。
  • 数据最终一致性:不保证数据实时一致,允许分布式数据经过一个时间窗口达到最终一致。

3.zookeeper的应用场景

  • 配置中心
    在一个web项目中,会涉及到很多的配置文件,比如mysql的,redis,springmvc的。这些配置文件一般都是公用的。在zookeeper之前,开发中都是通过写配置文件将配置信息存储在项目中,然后项目启动时候去加载配置文件。但是随着项目不断的增多,每个项目都需要这么一份或者多份配置文件,就显得太冗余了。而且,如果有个配置文件需要更改,比如mysql数据库连接用户和密码。那么我们需要更改配置文件之后重新打包发布工程,这样浪费了很多时间。而有了zookeeper之后就可以实现配置的集中管理。我们只需要在zookeeper中建立配置文件对应的永久性结点,如果项目启动需要初始化配置的时候就去zookeeper里面获取。如果在这些结点上添加watcher事件,每次该节点有变动就会去通知监听这个结点的客户端,这样一来就可以实时修改配置文件的结点,而且不用重新部署,重新启动工程了。

默认前提是:数据量很小,但是数据更新可能会比较快的场景。

  • 分布式锁
    分布式锁是控制分布式系统之间同步访问共享资源的一种方式。如果不同的系统或是同一个系统的不同主机之间共享了一个或一组资源,那么访问这些资源的时候,往往需要通过一些互斥手段来防止彼此之间的干扰,以保证一致性,在这种情况下,就需要使用分布式锁了。比如:通常的做法是把zk上的一个znode看作是一把锁,通过create znode的方式来实现。所有客户端都去创建 /distribute_lock 节点,最终成功创建的那个客户端也即拥有了这把锁。所有视图来获取这个锁的客户端,最终都是会被安排执行,只是有个全局时序了。做法和上面基本类似,只是这里 /distribute_lock 已经预先存在,客户端在它下面创建临时有序节点(这个可以通过节点的属性控制:CreateMode.EPHEMERAL_SEQUENTIAL来指定)。Zk的父节点(/distribute_lock)维持一份sequence,保证子节点创建的时序性,从而也形成了每个客户端的全局时序。
  • leader选举
    利用ZooKeeper的强一致性,能够保证在分布式高并发情况下节点创建的全局唯一性,即:同时有多个客户端请求创建 /currentMaster 节点,最终一定只有一个客户端请求能够创建成功。利用这个特性,就能很轻易的在分布式环境中进行集群选取了。比如:所有客户端创建请求,最终只有一个能够创建成功。在这里稍微变化下,就是允许所有请求都能够创建成功,但是得有个创建顺序,于是所有的请求最终在ZK上创建结果的一种可能情况是这样: /currentMaster/{sessionId}-1 ,/currentMaster/{sessionId}-2,/currentMaster/{sessionId}-3 ….. 每次选取序列号最小的那个机器作为Master,如果这个机器挂了,由于他创建的节点会马上小时,那么之后最小的那个机器就是Master了。
  • 发布/订阅
    ZooKeeper中特有watcher注册与异步通知机制,能够很好的协调分布式环境下数据实时更新的同步问题。比如在同一个结点注册watcher监听,一旦分布式环境下有一台服务器对该结点做了变更,其他监听该结点的服务器就得知变化,并对变化及时处理。
  • 命名服务
    在分布式环境中,通过使用命名服务,客户端能够通过指定的名字来获取服务提供者的地址或者信息。简单来说使用Zookeeper做命名服务就是用路径作为名字,路径上的数据就是其名字指向的实体。比如阿里巴巴的dubbo就是使用zookeeper作为命名服务的:
    服务提供者在启动的时候,向zk指定路径/dubbo/${serviceName}/providers文件夹下写入自己的URL地址,这个操作就完毕了服务的公布。
    服务消费者在启动的时候回,订阅/dubbo/{serviceName}/providers文件夹下的提供者URL地址, 并向/dubbo/{serviceName} /consumers文件夹下写入自己的URL地址。注意,全部向ZK上注冊的地址都是暂时节点。这样就行保证服务提供者和消费者可以自己主动感应资源的变化。
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 194,242评论 5 459
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 81,769评论 2 371
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 141,484评论 0 319
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 52,133评论 1 263
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 61,007评论 4 355
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 46,080评论 1 272
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 36,496评论 3 381
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 35,190评论 0 253
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 39,464评论 1 290
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 34,549评论 2 309
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 36,330评论 1 326
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 32,205评论 3 312
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 37,567评论 3 298
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 28,889评论 0 17
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 30,160评论 1 250
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 41,475评论 2 341
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 40,650评论 2 335

推荐阅读更多精彩内容