JMeter扩展插件实现对自定义协议进行支持

摘要##

JMeter本身提供了插件机制,允许第三方扩展JMeter以支持JMeter不支持的协议的测试。本文以扩展一个简单的Apache Kafka producer sampler为例描述了如何对JMeter进行扩展,方便地实现对新协议的支持。

Kafka简介##

Apache Kafka是由Apache软件基金会开发的一个开源消息系统项目。Kafka最初是由LinkedIn开发,并于2011年初开源。2012年10月从Apache孵化器毕业。该项目的目标是为处理实时数据提供一个统一、高通量、低等待的平台。

如下图所示,Kafka的producer(数据生产者)通过Socket向Kafka集群上配置好的主题(topic)发送数据,consumer(数据消费者)在另外一端消费由生产者那边产生的数据,并进行业务的处理。Kafka作为一个优秀的消息处理系统,在集群配置,主题管理等方面有很多需要深入理解和优化等地方,本文的重点是JMeter的扩展,以Kafka的生产者为例来描述如何利用JMeter来模拟大量的生产者的调用,更多关于Kafka的细节请参考它的官方文档

Kafka生产、消费者模型

准备工作##

扩展实现JMeter插件之前,需要先考虑清楚哪些选项需要暴露给测试人员。就像HTTP测试中,需要让用户输入服务器地址,端口号,路径等,同线程组里的连接是否共用等,如果提供是否共用连接这种选项的话,也需要在界面中体现,当然实现插件的时候处理连接的代码也会有所不同。

往Kafka上发送消息的时候,需要提供一些基本配置信息(实际Kafka的生产者配置不止这些),如果读者对下面所说的内容不了解也不要紧,只需要理解准备这些的目的是为了将这些配置信息提供给Kafka测试人员,在开始测试之前可以针对被测系统进行配置。

服务器所在地址,在Kafka中称之为Brokers

发送的主题的名字

Message Serializer,消息通过网络发送,需要将其序列化,这里指定的是消息序列化的方式

Key Serializer,Kafka发送消息的时候,可以指定Key,Key Serializer的主要作用是指定Key的序列化方式

发送的消息

下图是本文最终完成的JMeter Kafka插件的截图,测试开始之前需要输入上文所列的信息。

Kafka JMeter插件截图

JMeter插件实现步骤1 - 准备开发环境##

JMeter插件实现是标准的Java代码,打开Eclipse(作者使用的是4.5.2),新建一个Maven项目。我们的项目中需要引用到JMeter本身提供的一些库,包括ApacheJMeter_core和ApacheJmeter_java,并且对JMeter的版本依赖是3.0。另外,还需要对Kafka的类库也需要引入,pom.xml中依赖部分的代码如下。

UTF-83.0org.apache.jmeterApacheJMeter_core${jmeter-version}providedorg.apache.jmeterApacheJMeter_java${jmeter-version}providedorg.apache.kafkakafka_2.9.20.8.1.1org.apache.zookeeperzookeeper

工程创建完毕之后,开始编写代码来实现插件。

JMeter插件实现步骤2 - 自定义界面##

JMeter的插件机制会在$JMETER_HOME/lib/ext目录下去动态加载符合指定条件的JAR包,并在JMeter中显示出来。比如要扩展UI的话,扩展的Java类的包名必须是”.gui.”,同样的扩展函数的Java类的包名必须是”.function.”.

新建一个类,org.apache.jmeter.protocol.kafka.control.gui.KafkaSamplerUI,并指定其父类为AbstractSamplerGui。该类需要实现以下的功能:

1)界面布局与控件。JMeter的界面是标准的Swing,所以里面的控件和布局都是标准的Swing写法。

2)界面与Sampler之间的数据交换。Sampler在JMeter中继承的是TestElement,用户输入的数据都是保存在Sampler中的,因此可以认为这个是界面的模型。界面与模型(Sampler)之间的数据交换需要实现父类的下面几个方法,

publicvoidconfigure(TestElement el)

该方法用于把Sampler中的数据加载到界面中。在实现自己的逻辑之前,先调用一下父类的方法super.configure(el),这样可以确保框架自动为你加载一些缺省数据,比如Sampler的名字。

publicvoidmodifyTestElement(TestElement e)

这个方法用于把界面的数据移到Sampler中,刚好与上面的方法相反。在调用自己的实现方法之前,请先调用一下super.configureTestElement(e),这个会帮助移到一些缺省的数据。

publicTestElementcreateTestElement()

该方法创建一个新的Sampler,然后将界面中的数据设置到这个新的Sampler实例中。

publicvoidclearGui()

该方法会在reset新界面的时候调用,这里可以填入界面控件中需要显示的一些缺省的值。

在本文的实现中,分别实现上面的那些方法,包括显示5个控件(4个控制参数的控件在一个panel里,发送的消息的控件在另外一个panel里),以及另外的几个方法用于和Sampler之间的数据交换等。完整的代码请参见这里

JMeter插件实现步骤3 - 自定义Kafka Sampler##

新建一个Sampler,org.apache.jmeter.protocol.kafka.sampler.KafkaSampler,并指定其父类为AbstractSampler。该类需要实现以下的功能:

1)增加一些getter/setter方法,这些方法用于与UI之间的数据交换,这些数据在用户保存/打开脚本的时候将被自动序列化/反序列化。

2)实现sample方法:

publicSampleResultsample(Entry entry)

该方法是JMeter实现对目标系统发起请求实际工作的地方。主要的工作是记录请求处理时间,对返回结果进行处理和判断,并根据处理结果返回SampleResult,该SampleResult中需要指定返回的内容是否成功,以及消息等。该方法的基本实现框架如下所示:

publicSampleResultsample(Entry entry){        SampleResult result =newSampleResult();        result.setSampleLabel(getName());try{            result.sampleStart();//对目标系统发出测试请求result.sampleEnd();            result.setSuccessful(true);            result.setResponseCodeOK();        }catch(Exception e) {            result.sampleEnd();// stop stopwatchresult.setSuccessful(false);            result.setResponseMessage("Exception: "+ e);// get stack trace as a String to return as document datajava.io.StringWriter stringWriter =newjava.io.StringWriter();            e.printStackTrace(newjava.io.PrintWriter(stringWriter));            result.setResponseData(stringWriter.toString(),null);            result.setDataType(org.apache.jmeter.samplers.SampleResult.TEXT);            result.setResponseCode("FAILED");        }returnresult;    }

本文的实现中,生成一个Kafka的Producer对象,并将用户界面里指定的信息发送到Kafka服务器上。完整的代码请参见这里

JMeter插件实现步骤4 - 打包、部署##

打包过程与普通的Maven项目相似,但是需要注意的是本插件需要把Kafka相关的依赖库文件也一并打入,否则还需要单独准备所依赖的JAR包。因此在pom.xml中加入下面的build插件。右击工程 》Run As 》Maven install,运行成功后,在工程的target目录下会生成一个kafka_jmeter-jar-with-dependencies.jar,这个就是我们打好的插件。

${project.artifactId}installorg.apache.maven.pluginsmaven-compiler-plugin2.5.11.71.7org.apache.maven.pluginsmaven-assembly-pluginjar-with-dependenciesassemble-allpackagesingle

插件开发完成后,将kafka_jmeter-jar-with-dependencies.jar拷贝到$JMETER_HOME/lib/ext目录下,如果之前已经打开了JMeter,则需要将JMeter关闭重启。

JMeter插件实现步骤5 - 测试插件##

新建一个测试脚本,加入一个线程组,然后添加一个Sampler,如果运行正常,在子菜单中应该能看到我们扩展出来的“Kafka Sampler”。

开发好的插件

修改一下线程组里的线程数,则能实现多虚拟用户的并发测试了。下图是“查看结果树”里面显示的内容。

查看结果树中的内容

下图是Kafka的消费者端,能看到相关的消息已经发送成功。

服务器端控制台输出

更多扩展方式##

如本文所示,如果通过比较“标准”的方式来扩展JMeter对新协议的测试,还是有一定的工作量,特别是如果界面功能比较丰富的话,实现界面的那个类会比较复杂。如果对界面的要求不是很高,那么还有一种比较简单的可选项是通过扩展AbstractJavaSamplerClient,通过扩展该类,可以实现对简单的测试配置属性进行设置,并在runTest方法的实现中对目标系统发出请求

publicSampleResultrunTest(JavaSamplerContext context)

该方法的返回值是SampleResult,就是验证测试结果,与上文中实现步骤3比较类似。读者可以参见本文的参考资料中关于AbstractJavaSamplerClient中列出的几篇文章。

大规模自定义协议测试 - XMeter帮您提高效率,降低成本##

如果用户自定义的协议的测试,单台机器能够模拟的客户端是有限的,如果针对大规模的协议测试(比如本文举例的Kafka),可能需要准备大量的测试机器对被测系统进行打压,这个过程需要大量的准备机器环境,以及管理这些环境的工作,导致工作效率比较低、而且容易出错。XMeter将这些过程迁移至云端,弹性伸缩管理这些压力机,用户只要关注测试脚本的实现过程,而无需关心这些测试环境的管理,从而大大降低了大规模性能测试的复杂度。另外XMeter提供了丰富的测试报告,让性能问题一目了然。

参考资料##

JMeter扩展官方文档

AbstractJavaSamplerClient的方式扩展JMeter文章1

AbstractJavaSamplerClient的方式扩展JMeter文章2

AbstractJavaSamplerClient的方式扩展JMeter文章3

关于我们##

XMeter成立于2016年,核心团队都来自于IBM,是一家领先技术的性能测试持续集成咨询与服务提供商。我们致力于提供给客户可靠,简单,低成本的性能测试解决方案。

作者:XMeter性能测试云服务

链接:https://www.jianshu.com/p/08fe9b6c3f84

來源:简书

著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,530评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 86,403评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,120评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,770评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,758评论 5 367
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,649评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,021评论 3 398
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,675评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,931评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,659评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,751评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,410评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,004评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,969评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,203评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,042评论 2 350
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,493评论 2 343

推荐阅读更多精彩内容