jmeter 测试ES并发

Jmeter 测试

Jmeter安装

Jmeter配置

  • 配置线程组

    测试计划->添加->threads->线程组:

    如图所示则是200个用户,Ranmp-up Period是这么多用户在10s内提交完毕,循环10次

image.png
  • 配置参数文件

    线程组->添加->配置元件->CSV Data Set Config

    配置相应的属性

image.png
  • 配置HTTP请求

    线程组->添加->Sampler->HTTP请求

    配置相应的属性

image.png
  • 添加输出报告

    线程组->添加->监听器->summary report

  • 添加察看结果树

    线程组->添加->监听器->察看结果树

    通过结果树可以看到发送到服务器的请求,以及返回的结果。可以通过这个组件调试请求。

image.png

结果分析

结果如图所示:

image.png
samples:运行的线程总数5000。
Average:平均响应时间192ms。
Error:错误率0。
Throughout:吞吐量,每秒钟处理了1831个请求。

遇到的问题

  • 编码问题

    1)查看参数文件的编码,一般用utf-8,。如果是txt文件,且编码不是utf-8,打开文件,另存为,设置编码格式为utf-8

    2)在CSV Data Set Config配置时,设置解析文件的格式为utf-8

    3)在HTTP请求配置,设置Content encoding为utf-8

Python脚本测试


import sys
import os
import threading
import random
import time
import json 

def parse_param():
    args = sys.argv
    thread_num = args[1]
    times = args[2]
    keyword_fname = args[3]
    rfile = open(keyword_fname) 
    keywords = rfile.read().split("\n")
    rfile.close()
    return int(thread_num),int(times),keywords

def get_file_data(fname):
    rfile = open(fname)
    keywords = rfile.read().split("\n")
    rfile.close()
    return keywords

class myThread(threading.Thread):
    def __init__(self,cmd,cost_time):
        self.cmd =cmd
        self.cost_time = cost_time
        threading.Thread.__init__(self)

    def run(self):
        result = os.popen(self.cmd).read()
        result =json.loads(result)
        if "error" in result.keys():
            print "error:%s" % result
        self.cost_time.append(int(result["took"]))
        #self.cost_time += [int(result["took"])]
        #if result[0:10].find("error") != -1:
        #    print "error"
        #print result

def run(thread_num,times,cmds):
    threads=[]
    start_time = time.time()
    t = 0
    cost_times =[]
    for i in range(0,times):
        for j in range(0,thread_num):
            tmp_thread = myThread(cmds[t],cost_times)
            t = t+1
            threads.append(tmp_thread)
        for val in threads:
            val.start()

        for val in threads:
            val.join()
        threads[:] = []
    print len(cost_times)
    avg_time = sum(cost_times)/len(cost_times)
    #avg_time = float((time.time()-start_time))/times
    output = float(thread_num*times)/(time.time()-start_time)
    return avg_time,output

def clear_cache():
    cmd = "curl 100.110.11.131:9200/_cache/clear"
    result = os.popen(cmd).read()
    print result

def deal_once(thread_num,times,keywords):
    #thread_num,times,keywords=parse_param()
    clear_cache()
    ip_list = ["xxx","xxx","xxx","xxx"]
    #cmd = "curl xxx:9200/customer/_search -d '{\"size\":0,\"query\":{\"should\":[";
    cmds =[]
    for val in keywords:
        cmd = "curl %s:9200/customer32/_search -d '{\"size\":0,\"query\":{\"bool\":{\"should\":[" % random.sample(ip_list,1)[0]
        keyword = val.split("\t")
        for key in keyword:
            tmp = "{\"match_phrase\":{\"strdescription\":\"%s\"}}," % key
            cmd = cmd + tmp
        cmd = cmd[:-1] + "]}}}'"
        cmds.append(cmd)
    print cmds[0]
    avg_time,output = run(thread_num,times,cmds)
    print "avg_time:%f" % avg_time
    print "output/s:%f" % output


def deal():
    #thread_num = [100,500,1000,2000,3000]
    #thread_num = [100,200,400,500]
    thread_num = [5000]
    times =1
    files = ["2_prefix.txt","6_prefix.txt","11_prefix.txt"]
    files = ["2_prefix.txt","6_prefix.txt"]
    files = ["11_prefix.txt"]
    for file in files:
        for num in thread_num:
            print "thread_num:%d\t file is %s" % (num,file)
            keywords = get_file_data(file)
            deal_once(num,times,keywords)
            time.sleep(1)


deal()
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,293评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,604评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,958评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,729评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,719评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,630评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,000评论 3 397
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,665评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,909评论 1 299
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,646评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,726评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,400评论 4 321
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,986评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,959评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,197评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,996评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,481评论 2 342

推荐阅读更多精彩内容

  • 在使用Jmeter进行接口的性能测试时,由于Jmeter 是JAVA应用,对于CPU和内存的消耗比较大,所以,当需...
    燕京博士阅读 4,159评论 0 16
  • 1 Jmeter安装配置 使用Jmeter前首先要安装JDK,配置JDK环境变量。Jmeter不需要安装,下载后...
    茶小汐阅读 2,919评论 0 8
  • Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具(例如配置管理,服务发现,断路器,智...
    卡卡罗2017阅读 134,594评论 18 139
  • 互联网压力性能Badboy.Jmeterhttp://itopic.org/jmeter-http-tcp.htm...
    燕京博士阅读 2,881评论 0 20
  • 1. JMeter 测试计划 测试计划 使用JMeter进行测试的起点,是其它JMeter测试元件的容器。 线程组...
    alamZheng阅读 3,339评论 0 7