4)zookeeper实战

分布式安装部署

1.集群规划

在hadoop102、hadoop103和hadoop104三个节点上部署Zookeeper。

2.解压安装

    (1)解压Zookeeper安装包到/opt/module/目录下

$ tar -zxvf zookeeper-3.4.10.tar.gz -C /opt/module/

    (2)同步/opt/module/zookeeper-3.4.10目录内容到hadoop103、hadoop104

$ xsync zookeeper-3.4.10/

3.配置服务器编号

    (1)在/opt/module/zookeeper-3.4.10/这个目录下创建zkData

$ mkdir -p zkData

    (2)在/opt/module/zookeeper-3.4.10/zkData目录下创建一个myid的文件

$ touch myid

添加myid文件,注意一定要在linux里面创建,在notepad++里面很可能乱码

    (3)编辑myid文件

$ vi myid

       在文件中添加与server对应的编号:

2

    (4)拷贝配置好的zookeeper到其他机器上

$ xsync myid

并分别在hadoop102、hadoop103上修改myid文件中内容为3、4

4.配置zoo.cfg文件

    (1)重命名/opt/module/zookeeper-3.4.10/conf这个目录下的zoo_sample.cfg为zoo.cfg

$ mv zoo_sample.cfg zoo.cfg

    (2)打开zoo.cfg文件

$ vim zoo.cfg

修改数据存储路径配置

dataDir=/opt/module/zookeeper-3.4.10/zkData

增加如下配置

#######################cluster##########################

server.2=hadoop102:2888:3888

server.3=hadoop103:2888:3888

server.4=hadoop104:2888:3888

    (3)同步zoo.cfg配置文件

$ xsync zoo.cfg

    (4)配置参数解读

server.A=B:C:D。

A是一个数字,表示这个是第几号服务器;

集群模式下配置一个文件myid,这个文件在dataDir目录下,这个文件里面有一个数据就是A的值,Zookeeper启动时读取此文件,拿到里面的数据与zoo.cfg里面的配置信息比较从而判断到底是哪个server。

B是这个服务器的ip地址;

C是这个服务器与集群中的Leader服务器交换信息的端口;

D是万一集群中的Leader服务器挂了,需要一个端口来重新进行选举,选出一个新的Leader,而这个端口就是用来执行选举时服务器相互通信的端口。

5.集群操作

    (1)分别启动Zookeeper

$ bin/zkServer.sh start

    (2)查看状态

$ bin/zkServer.sh status


客户端命令操作

1.启动客户端

$ bin/zkCli.sh

2.显示所有操作命令

$ help

3.查看当前znode中所包含的内容

$ ls /

4.查看当前节点详细数据

$ ls2 /

5.分别创建2个普通节点

$ create /sanguo "jinlian"

$ create /sanguo/shuguo "liubei"

6.获得节点的值

$ get /sanguo

7.创建短暂节点

$ create -e /sanguo/wuguo "zhouyu"

    (1)在当前客户端是能查看到的

$ ls /sanguo 

    (2)退出当前客户端然后再重启客户端

$ quit

$ bin/zkCli.sh

    (3)再次查看根目录下短暂节点已经删除

$ ls /sanguo

8.创建带序号的节点

$ create -s /sanguo/weiguo "caocao"

9.修改节点数据值

$ set /sanguo/weiguo "simayi"

10.节点的值变化监听

$ get /sanguo watch

11.节点的子节点变化监听(路径变化)

$ ls /sanguo watch

12.删除节点

$ delete /sanguo/jin

13.递归删除节点

$ rmr /sanguo/shuguo

14.查看节点状态

$ stat /sanguo


API应用(环境搭建)

1.创建一个Maven工程

2.添加pom文件

<dependency>

    <groupId>junit</groupId>

    <artifactId>junit</artifactId>

    <version>RELEASE</version>

</dependency>

<dependency>

    <groupId>org.apache.logging.log4j</groupId>

    <artifactId>log4j-core</artifactId>

    <version>2.8.2</version>

</dependency>

<!-- https://mvnrepository.com/artifact/org.apache.zookeeper/zookeeper -->

<dependency>

    <groupId>org.apache.zookeeper</groupId>

    <artifactId>zookeeper</artifactId>

    <version>3.4.10</version>

</dependency>


3.拷贝log4j.properties文件到项目根目录

需要在项目的src/main/resources目录下,新建一个文件,命名为“log4j.properties”,在文件中填入

log4j.rootLogger=INFO, stdout

log4j.appender.stdout=org.apache.log4j.ConsoleAppender 

log4j.appender.stdout.layout=org.apache.log4j.PatternLayout 

log4j.appender.stdout.layout.ConversionPattern=%d %p [%c] - %m%n 

log4j.appender.logfile=org.apache.log4j.FileAppender 

log4j.appender.logfile.File=target/spring.log 

log4j.appender.logfile.layout=org.apache.log4j.PatternLayout 

log4j.appender.logfile.layout.ConversionPattern=%d %p [%c] - %m%n


API应用(ZooKeeper API)

创建zookeeper客户端

public class TestZookeeper {

    private String connectString = "hadoop102:2181,hadoop103:2181,hadoop104:2181";

    private int sessionTimeout = 2000;

    private ZooKeeper zkClient;

    @Before

    public void init() throws IOException {

        zkClient = new ZooKeeper(connectString, sessionTimeout, new Watcher() {

            @Override

            public void process(WatchedEvent event) {

                // 收到事件通知后的回调函数(用户的业务逻辑)

                System.out.println(event.getType() + "--" + event.getPath());

                // 再次启动监听

                try {

                    zkClient.getChildren("/", true);

                } catch (Exception e) {

                    e.printStackTrace();

                }

            }

        });

    }

}

创建子节点

    @Test

    public void createNode() throws Exception{

        String path = zkClient.create("/sanguo", "shuguo".getBytes(), ZooDefs.Ids.OPEN_ACL_UNSAFE, CreateMode.PERSISTENT);

        System.out.println(path);

    }

获取子节点并监听节点变化

    @Test

    public void getChildren() throws Exception{

        List<String> children = zkClient.getChildren("/", true);

        for (String child : children) {

            System.out.println(child);

        }

        // 延时阻塞

        Thread.sleep(Long.MAX_VALUE);

    }

收到通知后会回调:

    @Before

    public void init() throws IOException {

        zkClient = new ZooKeeper(connectString, sessionTimeout, new Watcher() {

            @Override

            public void process(WatchedEvent event) {

                // 收到事件通知后的回调函数(用户的业务逻辑)

                System.out.println(event.getType() + "--" + event.getPath());

                // 再次启动监听

                try {

                    zkClient.getChildren("/", true);

                } catch (Exception e) {

                    e.printStackTrace();

                }

            }

        });

    }

判断节点是否存在

    @Test

    public void exist() throws KeeperException, InterruptedException {

        Stat stat = zkClient.exists("/atguigu", false);

        System.out.println(stat == null ? "not exist" : "exist");

    }


案例

监听服务器节点动态上下线案例 - 简书

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,372评论 6 498
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,368评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,415评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,157评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,171评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,125评论 1 297
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,028评论 3 417
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,887评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,310评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,533评论 2 332
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,690评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,411评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,004评论 3 325
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,659评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,812评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,693评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,577评论 2 353

推荐阅读更多精彩内容

  • 分布式安装部署 集群规划在hadoop-100,hadoop-101,hadoop-102三个节点上部署Zooke...
    ZFH__ZJ阅读 432评论 0 2
  • 承载量是分布式系统存在的原因 当一个互联网业务获得大众欢迎的时候,最显著碰到的技术问题,就是服务器非常繁忙。当每天...
    XYLY阅读 1,460评论 1 48
  • 概念:微服务就是一些可独立运行、可协同工作的小的服务。微服务是现在特别流行的服务,微服务的字面意思是大家都很好理解...
    程序员技术圈阅读 3,346评论 2 47
  • Hello World
    liuzhongwei阅读 179评论 0 0
  • 不为掌声的诠释,不为刻意的征服,只有辛勤的汗水化作追求的脚步,心中坚定的信念,脚下沉稳的步伐,你用行动诉说着一个不...
    洋氵羊阅读 157评论 0 0