一种解决jar包冲突的组件实现

对于java开发程序员来说,jar包冲突是个让人很头痛的问题,而osgi可以解决这个问题,但是使用成本比较高,必须要按照osgi那一套结构来才能使用,在现有项目代码基础上重构的成本比较高,因此我通过学习osgi那一套实现,设计了一款使用不依赖osgi且使用门槛比较低的解决jar包冲突的组件,但没有在生产环境验证过,只是用来学习而已,代码见https://github.com/zjuphoenix/container-parent

其基本设计思想是把系统中依赖的组件全都单独打成一个bundle,比如项目依赖了几个单独的模块bundle1、bundle2等等,而bundle1和bundle2都依赖了netty,project本身也依赖了netty,但我们想要bundle1、bundle2和应用他们分别使用自己独立的netty版本的依赖,应用业务也用自己独立的netty版本。这时需要为bundle1和bundle2设计单独的自定义classloader,用于加载该bundle自己的类和依赖的第三方库。

首先看下测试项目打成的test.tar.gz压缩包解压后的目录结构:

test project dir.png

测试项目中除了包含lib(依赖的第三方库)和bin(运行脚本文件存放位置)这两个目录,还包含一个container目录,里面包含bundle-first和bundle-second两个依赖的模块和一个lib(conatiner自己的类及依赖),每个模块的目录结构包含一个lib目录(用于存放该模块自身类的jar包和依赖的第三方jar包)和一个config.json配置文件(用于定义该模块要暴露给业务方使用的类和需要从业务方类库中导入的类)

假设应用依赖了两个组件bundle1和bundle2,且希望这两个组件的类与应用自己的类隔离开来,其classloader隔离实现原理如下图:

classloader隔离实现架构.png

下面以测试项目test为例阐述class隔离实现,首先test项目依赖了bundle-first和bundle-second这两个组件,bundle-first依赖了netty的4.1.8版本,bundle-second依赖了netty的4.1.7版本,并且他们都依赖了spring的4.3.7版本,test自己也依赖了netty的4.1.6版本,假设希望这两个组件分别使用自己的netty版本,但希望使用应用依赖的spring版本,因此需要在配置文件中设置如下,以bundle-first为例:

{
  "exportJars":["bundle-first-api-1.0.jar", "bundle-first-1.0.jar"],
  "importPackages":["org.springframework", "com.study.bundle.first.api"]
}

以bundle-first为例,需要把自己的api包和实现包暴露出去,bundle-first-api-1.0.jar包中的类为BundleFirstApi接口,bundle-first-1.0.jar实现包中的类是BundleFirstImpl(BundleFirstApi接口实现),需要设置spring的依赖为import,表示spring的类不用bundle-first自己的classloader加载,交给应用类加载器去加载,需要注意的是必须要将bundle-first-api-1.0.jar中的接口类所在的包名作为import设置,让应用类加载器来加载这个api接口类,否则该接口类会由bundle-first的classloader加载,而在应用中获取该接口类BundleFirstApi实例的时候该接口类又会被应用类加载器加载一次,这样接口类实现类BundleFirstImpl与应用类加载器加载的BundleFirstApi类不属于父子关系,因为BundleFirstImpl的父类是由bundle-first的classloader加载的BundleFirstApi,不是应用类加载器加载的BundleFirstApi,从而无法强转而出现ClassCastException,如果把BundleFirstApi作为import配置在配置文件中,当加载BundleFirstImpl类时会先加载BundleFirstApi,当发现该类是import配置时,会交由应用类加载器该类,这样bundle-first的classloader加载的BundleFirstImpl类与应用类加载器加载的BundleFirstApi类便构成了父子关系。

从应用的lib包中可以看到,应用类依赖了bundle-first-api-1.0.jar和bundle-second-api-1.0.jar这两个组件的api包,应用通过ServiceLoader机制获取组件的实例,且通过ContainerClassLoader类加载器加载。

对该jar包隔离组件的用法是:首先要对要依赖的组件的api进行抽离,然后把实现类是api的包分为两个不同的包,如bundle-first-api-1.0.jar和bundle-first-1.0.jar。bundle-first-api-1.0.jar是要让应用在maven pom里去显示依赖的包,bundle-first-1.0.jar不需要显示依赖。这样实际上该组件依赖的第三方依赖如netty都会在bundle-first-1.0.jar依赖里,而没有在bundle-first-api-1.0.jar的依赖里,应用只依赖了bundle-first-api-1.0.jar,所以bundle-first的第三方依赖包不会引入到应用的依赖中,应用只是用到了bundle-first-api-1.0.jar这个包而已。

下面根据上图逐步分析:

  • step1:应用要加载BundleFirstApi类,因为应用的classpath中也有bundle-first-api-1.0.jar,因此也可以加载到BundleFirstApi类。
  • step2:应用通过ContainerClassLoader类加载器加载BundleFirstImpl组件实现类。
  • step3:ContainerClassLoader会判断BundleFirstImpl类是不是export class中的类,是的话便交给BundleExportClassManager处理。
  • step4:BundleExportClassManager维护着所有export class的缓存,在容器启动过程中就会把每个bundle的classloader创建好并根据配置文件把export class全都用相应的BundleClassLoader加载出来放在缓存中(注意:当加载暴露的类中的api接口实现类时,以BundleFirstImpl为例,要先加载其父类BundleFirstApi,因为BundleFirstApi是import类,会交给应用类加载器加载,也就是父类和子类不是同一个classloader加载的),因此可以根据类的全限定名从BundleExportClassManager获取每个bundle暴露出来的类,ContainerClassLoader把要加载的bundle-first的实现类的全限定名交给BundleExportClassManager,BundleExportClassManager找到对应的组件实现类并实例化。
  • step5:得到组件实现类BundleFirstImpl实例后,便可以调用该组件的一些方法了。

测试结果如下:

App:
test spring classloader:sun.misc.Launcher$AppClassLoader@14dad5dc
spring version: 4.3.6.RELEASE
test app class: io.netty.util.Version classloader:sun.misc.Launcher$AppClassLoader@14dad5dc
app netty version:{netty-buffer=netty-buffer-4.1.6.Final.35fb0ba, netty-codec=netty-codec-4.1.6.Final.35fb0ba, netty-codec-dns=netty-codec-dns-4.1.6.Final.35fb0ba, netty-codec-haproxy=netty-codec-haproxy-4.1.6.Final.35fb0ba, netty-codec-http=netty-codec-http-4.1.6.Final.35fb0ba, netty-codec-http2=netty-codec-http2-4.1.6.Final.35fb0ba, netty-codec-memcache=netty-codec-memcache-4.1.6.Final.35fb0ba, netty-codec-mqtt=netty-codec-mqtt-4.1.6.Final.35fb0ba, netty-codec-redis=netty-codec-redis-4.1.6.Final.35fb0ba, netty-codec-socks=netty-codec-socks-4.1.6.Final.35fb0ba, netty-codec-stomp=netty-codec-stomp-4.1.6.Final.35fb0ba, netty-common=netty-common-4.1.6.Final.35fb0ba, netty-handler=netty-handler-4.1.6.Final.35fb0ba, netty-handler-proxy=netty-handler-proxy-4.1.6.Final.35fb0ba, netty-resolver=netty-resolver-4.1.6.Final.35fb0ba, netty-resolver-dns=netty-resolver-dns-4.1.6.Final.35fb0ba, netty-tcnative=netty-tcnative-1.1.33.Fork23.f89906a, netty-transport=netty-transport-4.1.6.Final.35fb0ba, netty-transport-native-epoll=netty-transport-native-epoll-4.1.6.Final.35fb0ba, netty-transport-rxtx=netty-transport-rxtx-4.1.6.Final.35fb0ba, netty-transport-sctp=netty-transport-sctp-4.1.6.Final.35fb0ba, netty-transport-udt=netty-transport-udt-4.1.6.Final.35fb0ba}
BundleFirst:
test import: spring classloader:sun.misc.Launcher$AppClassLoader@14dad5dc
spring version: 4.3.6.RELEASE
test import: BundleFirstApi classloader:sun.misc.Launcher$AppClassLoader@14dad5dc
test export: BundleFirstImpl classloader:bundle-first's BundleClassLoader
test bundle class: io.netty.util.Version classloader:bundle-first's BundleClassLoader
bundle-first netty version:{netty-buffer=netty-buffer-4.1.8.Final.76e22e6, netty-codec=netty-codec-4.1.8.Final.76e22e6, netty-codec-dns=netty-codec-dns-4.1.8.Final.76e22e6, netty-codec-haproxy=netty-codec-haproxy-4.1.8.Final.76e22e6, netty-codec-http=netty-codec-http-4.1.8.Final.76e22e6, netty-codec-http2=netty-codec-http2-4.1.8.Final.76e22e6, netty-codec-memcache=netty-codec-memcache-4.1.8.Final.76e22e6, netty-codec-mqtt=netty-codec-mqtt-4.1.8.Final.76e22e6, netty-codec-redis=netty-codec-redis-4.1.8.Final.76e22e6, netty-codec-smtp=netty-codec-smtp-4.1.8.Final.76e22e6, netty-codec-socks=netty-codec-socks-4.1.8.Final.76e22e6, netty-codec-stomp=netty-codec-stomp-4.1.8.Final.76e22e6, netty-common=netty-common-4.1.8.Final.76e22e6, netty-handler=netty-handler-4.1.8.Final.76e22e6, netty-handler-proxy=netty-handler-proxy-4.1.8.Final.76e22e6, netty-resolver=netty-resolver-4.1.8.Final.76e22e6, netty-resolver-dns=netty-resolver-dns-4.1.8.Final.76e22e6, netty-tcnative=netty-tcnative-1.1.33.Fork26.142ecbb, netty-transport=netty-transport-4.1.8.Final.76e22e6, netty-transport-native-epoll=netty-transport-native-epoll-4.1.8.Final.76e22e6, netty-transport-rxtx=netty-transport-rxtx-4.1.8.Final.76e22e6, netty-transport-sctp=netty-transport-sctp-4.1.8.Final.76e22e6, netty-transport-udt=netty-transport-udt-4.1.8.Final.76e22e6}
1
BundleSecond:
test import: spring classloader:sun.misc.Launcher$AppClassLoader@14dad5dc
spring version: 4.3.6.RELEASE
test import: BundleSecondApi classloader:sun.misc.Launcher$AppClassLoader@14dad5dc
test export: BundleSecondImpl classloader:bundle-second's BundleClassLoader
test bundle class: io.netty.util.Version classloader:bundle-second's BundleClassLoader
bundle-second netty version:{netty-buffer=netty-buffer-4.1.7.Final.7a21eb1, netty-codec=netty-codec-4.1.7.Final.7a21eb1, netty-codec-dns=netty-codec-dns-4.1.7.Final.7a21eb1, netty-codec-haproxy=netty-codec-haproxy-4.1.7.Final.7a21eb1, netty-codec-http=netty-codec-http-4.1.7.Final.7a21eb1, netty-codec-http2=netty-codec-http2-4.1.7.Final.7a21eb1, netty-codec-memcache=netty-codec-memcache-4.1.7.Final.7a21eb1, netty-codec-mqtt=netty-codec-mqtt-4.1.7.Final.7a21eb1, netty-codec-redis=netty-codec-redis-4.1.7.Final.7a21eb1, netty-codec-smtp=netty-codec-smtp-4.1.7.Final.7a21eb1, netty-codec-socks=netty-codec-socks-4.1.7.Final.7a21eb1, netty-codec-stomp=netty-codec-stomp-4.1.7.Final.7a21eb1, netty-common=netty-common-4.1.7.Final.7a21eb1, netty-handler=netty-handler-4.1.7.Final.7a21eb1, netty-handler-proxy=netty-handler-proxy-4.1.7.Final.7a21eb1, netty-resolver=netty-resolver-4.1.7.Final.7a21eb1, netty-resolver-dns=netty-resolver-dns-4.1.7.Final.7a21eb1, netty-tcnative=netty-tcnative-1.1.33.Fork25.87555d6, netty-transport=netty-transport-4.1.7.Final.7a21eb1, netty-transport-native-epoll=netty-transport-native-epoll-4.1.7.Final.7a21eb1, netty-transport-rxtx=netty-transport-rxtx-4.1.7.Final.7a21eb1, netty-transport-sctp=netty-transport-sctp-4.1.7.Final.7a21eb1, netty-transport-udt=netty-transport-udt-4.1.7.Final.7a21eb1}
2

通过测试结果可知:
首先看App的class测试结果,其依赖的spring的类的classloader是AppClassLoader,其依赖的netty类的classloader是AppClassLoader,版本为4.1.6,与每个bundle的不同。

然后看每个bundle的class测试结果,每个bundle的spring的类是由AppClassLoader加载的,且版本为4.3.6.RELEASE,虽然每个bundle依赖的spring版本都是4.3.7.RELEASE,但因为配置了spring的类为import,因此会从AppClassLoader加载,验证了结果的正确性。

bundle1的BundleFirstImpl使用他自己的classloader加载的,结果正确;bundle1依赖的netty类是由自己的classloader加载的,且netty版本为4.1.8,结果正确。bundle1的BundleFirstApi类是由AppClassLoader加载的,因为该类的包名配置在了import里。

bundle2的BundleSecondImpl使用他自己的classloader加载的,结果正确;bundle2依赖的netty类是由自己的classloader加载的,且netty版本为4.1.7,结果正确。bundle2的BundleSecondApi类是由AppClassLoader加载的,因为该类的包名配置在了import里。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,080评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,422评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,630评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,554评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,662评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,856评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,014评论 3 408
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,752评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,212评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,541评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,687评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,347评论 4 331
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,973评论 3 315
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,777评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,006评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,406评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,576评论 2 349

推荐阅读更多精彩内容

  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,633评论 18 139
  • Android 自定义View的各种姿势1 Activity的显示之ViewRootImpl详解 Activity...
    passiontim阅读 171,800评论 25 707
  • Spring Boot 参考指南 介绍 转载自:https://www.gitbook.com/book/qbgb...
    毛宇鹏阅读 46,773评论 6 342
  • 作为一个20出头的美少女,我太对不起我的年纪了。继脖子硬了一周之后眼睛神奇的长出了个大包,麦粒肿,哈哈哈,其...
    蕾哦蕾哦蕾阅读 564评论 0 0
  • 你有选择权?看似有又好似没有。 年少不懂事,等到懂的时候又盘根错节分不清是不能选 还是不敢选。 到头来空余恨。 周...
    吧一阅读 364评论 0 0