Grafana7+InfluxDB2+Jmeter5 搭建可视化性能测试监控平台

自influxdb1.8以后,编写语言换成flux,数据库database换成bucket。

一、整体流程

JMeter + InfluxDB使用jmeter后置处理器将JMeter指标导出到InfluxDB数据库. 如果想要将数据可视化,那就需要在Grafana中配置数据源。
步骤:
1、搭建环境(使用docker)

  • 1.1 influxdb;
  • 1.2 grafana(docker-compose.yml);
  • 1.3jmeter;

2、配置

  • 2.1 配置jmeter的后置监听器;
  • 2.2在influxdb中建立接收jmeter运行结果的数据的数据库(jmeterdb);
  • 2.3在grafana中添加数据源influxdb并将jmeterdb的数据在其显示(导入插件),配置展示参数。

3、建立运行jmeter的脚本

不同用户在grafana中查看运行结果图

二、工具简单介绍

1.InfluxDB是一个用于存储和分析时间序列数据的开源数据库。
2.Grafana是大多数 数据库的开源分析和监控解决方案
3.jmeter是性能测试工具
jmeter中的Backend listener(后置监听器),可以将返回的响应信息保存到数据库中

三、整体配置过程

1、搭建环境

1.1 基础安装:Docker,docker-compose

参考安装文档,在适合的环境下完成基础环境安装
在centos7中安装:(https://docs.docker.com/engine/install/centos/
安装docker命令:yum install docker
设置开机自动启动:service docker start
在mac下安装(https://docs.docker.com/docker-for-mac/install/
查看docker版本:docker version
安装compose(https://docs.docker.com/compose/install/
pip3 install docker-compose
或Yum install docker-compose

1.2 使用docker-compose.yml,.env创建influxdb,grafana

docker-compose的使用参考:https://docs.docker.com/compose/gettingstarted/
目前influxdb的最新版本lastest是2.0.5

  • 1、创建docker-compose.yml文件,把配置写入
#这是docker-compose.yml中内容
version: '3.1'

services:
 influxdb:
   image: influxdb:latest
   container_name: influxdb
   ports:
     - "8083:8083"
     - "8086:8086"
     - "8090:8090"
   environment:
     - INFLUXDB_DB=db0
     - INFLUXDB_ADMIN_USER=${INFLUXDB_USERNAME}
     - INFLUXDB_ADMIN_PASSWORD=${INFLUXDB_PASSWORD}
   volumes:
     - influxdb-storage:/var/lib/influxdb

 grafana:
   image: grafana/grafana:latest
   container_name: grafana
   ports:
     - "3000:3000"
   environment:
     - GF_SECURITY_ADMIN_USER=${GRAFANA_USERNAME}
     - GF_SECURITY_ADMIN_PASSWORD=${GRAFANA_PASSWORD}
   depends_on:
     - influxdb
   user: "0"
   volumes:
     - grafana-storage:/var/lib/grafana
     - ./grafana-provisioning/:/etc/grafana/provisioning
volumes:
  influxdb-storage:
  grafana-storage:
  • 2、创建环境文件.env,把环境变量写入
    touch .env
#建立环境文件.env,包括以下内容:
INFLUXDB_USERNAME=admin
INFLUXDB_PASSWORD=admin123

GRAFANA_USERNAME=admin
GRAFANA_PASSWORD=admin

PROMETHEUS_USERNAME=admin
PROMETHEUS_PASSWORD=admin

  • 3、运行docker-compose -f docker-compose.yml up -d


    image.png
  • 4、访问下面的网址进入配置
    在哪里部署把localhost换成对应的IP,本人环境mac下安装的docker-desktop.

    image.png

    grafana: http://localhost:3000/
    influxdb2: http://localhost:8086/

1.3 jmeter5.4安装

2、配置

2.1 influxdb2建立数据库(bucket)

mysql与influxdb对比


image.png

初始化建立:
influxdb2: http://localhost:8086/
使用admin/admin123登陆并修改密码,初始化设置组织org,初始化数据库bucket。

image.png

之后建立
image.png

2.2grafana配置数据源influxdb(2.0)

  • 1.登陆到grafana主页( http://localhost:3000/)之后,创建新的Data Source:influxdb

    image.png

  • 2.配置Database,选择InfluxDB:

  • 3.输入InfluxDB信息
    3.1填入你的IP地址http://这里是influx的IP:8086(不是localhost)否则会报bad gateway的错。选择flux语言influx2.0。
    3.2输入InfluxDB Details信息 org,bucket,token(在初始化中设置的), 如果忘记在influxDB(http://localhost:8086)中data-buckets/tokens查看

    image.png

    image.png

image.png

2.3 grafana导入Jmeter保存到influxdb2的插件

下面的配置分二种情况
第一种情况:
环境java11,influxdb2,最新插件模板

  • 1、在https://grafana.com/grafana/dashboards中搜索jmeter,influxdb2

    image.png

  • 2、获得ID值13644,https://grafana.com/grafana/dashboards/13644

  • 3、登陆的Grafana主页添加+ import去粘贴ID或URL


    image.png
  • 4、然后可以进行命名,填入之前建好的DataSource 名字.


    image.png
  • 5、可以看到各种写好的计数器,不过这时应该还没有数据,因为我们还没跑jmeter的脚本,还没配置jmeter。


    image.png

2.3 在Jmeter脚本中添加后置监听器

第一种情况:
环境java11,influxdb2

3.将线程组加些并发数,跑一下。再在grafana中查看,选择最近5分钟的效果

image.png
image.png

第二种情况:
java8 +influxdb2

  • 1、在Jmeter脚本中添加后置监听器


    image.png
  • 2、在https://grafana.com/grafana/dashboards中搜索jmeter,influxdb,找到ID:5496,在grafana 中import并设置。
    image.png
  • 3、由于这个插件适合的是influxdb1.8以下,而influxdb2.0以上使用flux语言,所以面板上没有数据,我们可以手工更改语句。
    请求数的panel的编辑
Count:
from(bucket: "jmeterdb")
  |> range(start: v.timeRangeStart, stop: v.timeRangeStop)
  |> filter(fn: (r) => r["_measurement"] == "jmeter")
  |> filter(fn: (r) => r["_field"] == "count")
  |> aggregateWindow(every: v.windowPeriod, fn: mean, createEmpty: false)
  |> yield(name: "mean")

如果大家不知道如何编写,可以在influxdb2的上面导出显示的地方利用选择生成脚本:
1.登陆influxdb,
2.在explore中选择数据库,数据表,计数器,字段


image.png

3.转成脚本


image.png
  • 4、最后的结果


    image.png

第三种情况:influxdb1.8以下
略,可参考:https://www.jianshu.com/p/476ba7703409

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 204,189评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,577评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,857评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,703评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,705评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,620评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,995评论 3 396
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,656评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,898评论 1 298
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,639评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,720评论 1 330
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,395评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,982评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,953评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,195评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,907评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,472评论 2 342

推荐阅读更多精彩内容