dubbo连接zookeeper注册中心因为断网导致线程无限等待问题【转】

最近维护的系统切换了网络环境,由联通换成了电信网络,因为某些过滤规则导致系统连不上zookeeper服务器(应用系统机器在深圳,网络为电信线路,zookeeper服务器在北京,网络为联通线路),因为我不是运维人员也不懂运维相关的技术,所以排查了很久也不知道原因,最后无奈之下把深圳这边的网络切回了联通,系统恢复正常。

但是因为本次事故体现了一个很严重的问题,即当zookeeper注册中心连不上时dubbo的线程会无限等待,因为系统有一些定时任务会比较频繁地开启新线程连接dubbo,所以导致的结果是tomcat一会儿线程池就满了,其它的不依赖dubbo的功能也被阻塞无法使用。

所以需要解决一个问题,即在断网的情况下要保证应用程序可以运行(有很多功能不依赖外网),一开始我以为dubbo应该有对ZKClient连接相关的超时时间配置,结果找了很久也没发现,后来debug了dubbo的源代码发现根本就没有设置超时时间,ZKClient默认的超时时间是Integer.MAX_VALUE,几乎等于无限等待,所以无奈之下只好重写了dubbo的ZookeeperClient实现,好在dubbo的扩展性非常好,基于SPI的扩展非常方便,下面是我的扩展代码:

1、增加一个文件com.alibaba.dubbo.remoting.zookeeper.ZookeeperTransporter放置于项目的META-INF/dubbo/internal文件夹下,dubbo便会自动扫描到这个文件。文件内容很简单就一句话:zkclient=com.gwall.zookeeper.ZkclientZookeeperTransporter

即把dubbo原来的默认实现替换为我的实现。

2、ZkclientZookeeperTransporter并不是我想替换的代码,我要替换的是ZkclientZookeeperTransporter的成员变量ZookeeperClient,只是dubbo只在ZookeeperTransporter上加了SPI注解,所以只好这样办了,ZkclientZookeeperTransporter代码照抄过来。

3、在ZkclientZookeeperTransporter里面使用自己的ZkclientZookeeperClient,代码如下:

package com.gwall.zookeeper;

import java.util.List;

import org.I0Itec.zkclient.IZkChildListener;

import org.I0Itec.zkclient.IZkStateListener;

import org.I0Itec.zkclient.ZkClient;

import org.I0Itec.zkclient.exception.ZkNoNodeException;

import org.I0Itec.zkclient.exception.ZkNodeExistsException;

import org.apache.zookeeper.Watcher.Event.KeeperState;

import com.alibaba.dubbo.common.URL;

import com.alibaba.dubbo.remoting.zookeeper.ChildListener;

import com.alibaba.dubbo.remoting.zookeeper.StateListener;

import com.alibaba.dubbo.remoting.zookeeper.support.AbstractZookeeperClient;

/** * 修改dubbo提供的ZkclientZookeeperClient * 主要目的是增加一个连接zookeeper的超时时间,避免ZkClient默认的无限等待 * @author long.zr * */

public class ZkclientZookeeperClient extends AbstractZookeeperClient {

private final ZkClient client;

private volatile KeeperState state = KeeperState.SyncConnected;

public ZkclientZookeeperClient(URL url) {

super(url);

//设置超时时间为5000毫秒

client = new ZkClient(url.getBackupAddress(),5000);

client.subscribeStateChanges(new IZkStateListener() {

public void handleStateChanged(KeeperState state) throws Exception {

ZkclientZookeeperClient.this.state = state;

if (state == KeeperState.Disconnected) {

stateChanged(StateListener.DISCONNECTED);

} else if (state == KeeperState.SyncConnected) {

stateChanged(StateListener.CONNECTED);

}

}

public void handleNewSession() throws Exception {

stateChanged(StateListener.RECONNECTED);

}

});

}

public void createPersistent(String path) {

try {

client.createPersistent(path, true);

} catch (ZkNodeExistsException e) {

}

}

public void createEphemeral(String path) {

try {

client.createEphemeral(path);

} catch (ZkNodeExistsException e) {

}

}

public void delete(String path) {

try {

client.delete(path);

} catch (ZkNoNodeException e) {

}

}

public List getChildren(String path) {

try {

return client.getChildren(path);

} catch (ZkNoNodeException e) {

return null;

}

}

public boolean isConnected() {

return state == KeeperState.SyncConnected;

}

public void doClose() {

client.close();

}

public IZkChildListener createTargetChildListener(String path, final ChildListener listener) {

return new IZkChildListener() {

public void handleChildChange(String parentPath, List currentChilds)

throws Exception {

listener.childChanged(parentPath, currentChilds);

}

};

}

public List addTargetChildListener(String path, final IZkChildListener listener) {

return client.subscribeChildChanges(path, listener);

}

public void removeTargetChildListener(String path, IZkChildListener listener) {

client.unsubscribeChildChanges(path,  listener);

}

}

框架/平台构成:

Maven+Springmvc + Mybatis + Shiro(权限)+ Tiles(模板) +ActiveMQ(消息队列) + Rest(服务) + WebService(服务)+ EHcache(缓存) + Quartz(定时调度)+ Html5(支持PC、IOS、Android)

用户权限系统:

组织结构:角色、用户、用户组、组织机构;权限点:页面、方法、按钮、数据权限、分级授权

项目管理新体验:

快速出原型系统、组件树、版本控制、模块移植、协同开发、实时监控、发布管理

可持续集成:

所有组件可移植、可定制、可扩充,开发成果不断积累,形成可持续发展的良性循环

支持平台平台:

Windows XP、Windows 7 、Windows 10 、 Linux 、 Unix

服务器容器:

Tomcat 5/6/7 、Jetty、JBoss、WebSphere 8.5

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 135,026评论 19 139
  • 0 准备 安装注册中心:Zookeeper、Dubbox自带的dubbo-registry-simple;安装Du...
    七寸知架构阅读 14,027评论 0 88
  • 万物复苏的春天在悄悄走近,除了保养好皮肤、励志瘦身藏肉穿上美美的衣服之外,你也许还需要一些或成熟复古或俏皮可爱的配...
    安雅敏敏阅读 1,677评论 4 46
  • 口中三千章怀事,袖里乾坤不自知。 挥笔直书谈天地,纵论五行异曲直。 松林定隐观时势,燕雀赢飞笑吾痴。 时人安知鸿鹄...
    萌萌AC阅读 438评论 0 2
  • 目录|我的奇葩相亲经历目录上一章|第10章戳这里哦 文|疯狂小梅子 中午和李老师在学校食堂吃饭。 她特意带了自己做...
    疯狂小梅子阅读 1,907评论 20 13