【软件测试】Jmeter性能测试(性能测试,Jmeter使用与结果分析)_jmeter测试-程序员宅基地

技术标签: 性能分析  压力测试  性能测试  Jemeter  测试工具  

前言

性能测试是一个全栈工程师/架构师必会的技能之一,只有学会性能测试,才能根据得到的测试报告进行分析,找到系统性能的瓶颈所在,而这也是优化架构设计中重要的依据。

本文简单讲述了性能测试以及性能测试工具Jmeter。另外,我会将其他测试相关的文章也放在这个系列。

一、性能测试

1. 什么是性能测试?

性能测试就是通过特定的方式对被测试系统按照一定测试策略施加压力,获取该系统的响应时间、TPS、吞吐量、资源利用率等性能指标,来检测系统上线后能否满足用户需求的过程。

2. 性能测试的重要性

性能测试是检验我们系统性能的重要步骤,只有经过性能测试,得到对应的测试报告,才能根据报告中所呈现的现象(成功率、响应时长、TPS等)来进行分析,找出系统的瓶颈所在,优化系统的性能。

3. 性能指标——QPS和TPS

①QPS

QPS,全名 Queries Per Second,意思是“每秒查询率”,是一台服务器每秒能够响应的查询次数,是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准。

②TPS

TPS 即 Transactions Per Second的缩写,每秒处理的事务数目。一个事务是指一个客户机向服务器发送请求然后服务器做出反应的过程。
客户机在发送请求时开始计时,收到服务器响应后结束计时,以此来计算使用的时间和完成的事务个数,最终利用这些信息作出的评估分。

Qps 基本类似于 Tps,但是不同的是,对于一个页面的一次访问,形成一个 Tps;但一次页面请求,可能产生多次对服务器的请求,服务器对这些请求,就可计入“Qps”之中。
QPS和TPS都是衡量一个系统性能的重要指标之一。

二、压测工具Jmeter

1. 什么是Jmeter?

ApacheJMeter ,是一个100%纯Java的开源软件,旨在加载测试功能行为和测量性能。它最初设计用于测试Web应用程序,但后来扩展到其他测试功能。
相较于世面上一些其他性能测试工具,Jmeter是为数不多的既好用又开源免费的测试工具。

2. Jmeter主要元件

1、测试计划:是使用 JMeter 进行测试的起点,它是其它 JMeter测试元件的容器

2、线程组:代表一定数量的用户,它可以用来模拟用户并发发送请求。实际的请求内容在Sampler中定义,它被线程组包含。

3、配置元件:维护Sampler需要的配置信息,并根据实际的需要修改请求的内容。

4、前置处理器:负责在请求之前工作,常用来修改请求的设置

5、定时器:负责定义请求之间的延迟间隔。

6、取样器(Sampler):是性能测试中向服务器发送请求,记录响应信息、响应时间的最小单元,如:HTTP Request Sampler、FTP Request Sample、TCP Request Sample、JDBC Request Sampler等,每一种不同类型的sampler 可以根据设置的参数向服务器发出不同类型的请求。

7、后置处理器:负责在请求之后工作,常用获取返回的值。

8、断言:用来判断请求响应的结果是否如用户所期望的。

9、监听器:负责收集测试结果,同时确定结果显示的方式。

10、逻辑控制器:可以自定义JMeter发送请求的行为逻辑,它与Sampler结合使用可以模拟复杂的请求序列。

3. 下载安装

进入官网,点击左侧的Download Releases选择和是的版本即可下载。
在这里插入图片描述
下载好后是一个压缩包,将其解压到你想要的目录下(最好不要出现中文)即可。(当然它需要Java运行环境,如果没装可以另外去下个jdk,这里就不赘述了)

进入bin目录,双击运行jmeter.bat启动jmeter,

在这里插入图片描述
这样我们就打开了安装好的Jmeter。
在这里插入图片描述

如果不习惯英文也可以在设置里进行更改
在这里插入图片描述

三、一个简单的测试案例

这里我演示一个测试常规restful接口的例子。演示接口的项目来源于上次参加服创省赛时写的网脉铁塔监测物联网平台,这个接口主要是获取设备列表。正常获取响应结果如下:
在这里插入图片描述

在这里插入图片描述

①新建一个线程组

在这里插入图片描述

(1)线程数:即虚拟用户数。设置多少个线程数也就是设置多少虚拟用户数

(2)Ramp-Up时间(秒):设置虚拟用户数全部启动的时长。如果线程数为20,准备时长为10秒,那么需要10秒钟启动20个线程。也就是平均每秒启动2个线程。

(3)循环次数:每个线程发送请求的个数。如果线程数为20,循环次数为10,那么每个线程发送10次请求。总请求数为20*10=200。如果勾选了“永远”,
那么所有线程会一直发送请求,直到手动点击工具栏上的停止按钮,或者设置的线程时间结束。

这里我们设置30个线程(不要加太多,这里只是为了演示), 启动时间设置为3s,循环次数为3次
在这里插入图片描述

②新建一个HTTP请求

在这里插入图片描述
在这里插入图片描述
把这次要测试的接口信息填入

③添加HTTP信息头(请求头)

这里需要添加对应的消息头信息,在大多数web系统里,往往都对api接口做了权限认证,而这次测试的系统也不例外,是典型的token机制,如果不在请求头里加上合法的token,那么这个测试是会被拦截的,也就没办法对业务接口进行测试。所以这里需要把请求头中token复制过来(不同系统权限设计不同,我这里是X-Access-Token)。
当然如果是使用cookie机制来实现的权限认证,则需新建一个Cookie管理器,这里就不多赘述了。
在这里插入图片描述

在这里插入图片描述
当然这里也可以直接把整个请求头的信息都复制,然后在Jmeter中点击“从剪切板添加”,这样就可以一键把真实请求的请求头信息都复制过来。

④添加合适的响应断言

对相应结果添加合适的断言
在这里插入图片描述
在这次的测试系统中,如果成功响应那么响应结果就会包含success:true的字符串,所以我在断言中就做了相应的设置
在这里插入图片描述
大家可以针对自己的系统设置合适的断言。

⑤添加监听器

JMeter有许多UI Listener,可用于直接在JMeter UI中查看结果:

  • 以树形式查看结果:查看结果树显示所有样本响应的树,允许您查看任何样本的响应。
  • 图形结果:图形结果监听器生成一个简单的图形,绘制所有采样时间,
  • 聚合报告:聚合报告为测试中的每个不同命名的请求创建一个表行,
  • 在表中查看结果:此可视化工具为每个样本结果创建一行。与查看结果树一样,此可视化工具使用大量内存,
  • 聚合图:聚合图与聚合报告类似。主要区别在于聚合图提供了一种生成条形图并将图形保存为PNG文件的简便方法,
  • 生成摘要结果:此测试元素可以放在测试计划中的任何位置。生成到目前为止测试运行的摘要到日志文件和/或标准输出。显示运行和差异总计。

选择合适的结果呈现方式,这里我加了查看结果树、汇总报告和图形结果
在这里插入图片描述

⑥点击运行

点击运行图标便可运行测试了
在这里插入图片描述

运行完成后我们可以点击对应的监听器查看运行结果。
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

四、 Jmeter结果分析

1.如何得到可靠的测试报告?

以上我们便完成了一次简单的测试案例,但我们的测试还未结束。我们需要对测试结果进行分析,但是在真实项目中上述的测试结果是不可靠的,只能用作调试。你如果细心的话,应该能在运行Jmeter的命令行里找到这句话
在这里插入图片描述
它这里就直接说明了不建议我们在真实测试中使用gui界面,尤其是图表形式,为什么呢?

在负载测试期间不得使用图形结果,因为它消耗了大量资源(内存和CPU)。仅用于功能测试或测试计划调试和验证期间。

大多数UI监听器非常适合调试/测试目的。不要期望达到高负荷(> = 500个用户),谨慎使用它们。这些侦听器设计用于在JMeter UI中运行负载测试时快速获取指标,以实现轻负载。(<= 50个并发用户)

即使是中等负载(100-500个并发用户)也可以使用它们,但不要期望使用JMeter UI运行分布式JMeter测试。这不是目的。记住JMeter默认配置512MB堆内存,相当低。虽然你可以增加JMeter分配的内存,但它会感觉不会再漂浮在船上了。

那么在运行实际负载测试时我们可以使用哪些监听器?

①简单数据写入器

简单数据写入器:可以将监听器配置为将不同的项目保存到结果日志文件(JTL)。
这是JMeter中最有用的监听器。它根据外部文件中的配置保存性能指标:JTL文件。JMeter JTL文件是分析结果的最佳方式,但有一个缺点:您需要另一个工具来执行数据挖掘。

一般我们采取以下两种方案

  • 简单数据写入器+excel
  • 简单数据写入器+HTML报告DashBoard

这里推荐使用HTML报告DashBoard,这也是官方支持的方式。后文我也会演示利用HTML报告DashBoard来生成性能测试报告。

②后端监听器

后端监听器:后端监听器是一个异步监听器,使您可以插入BackendListenerClient的自定义实现。默认情况下,提供Graphite实现。

JMeter的Backend Listener允许插入外部数据库来存储测试结果和性能指标。

因此我们可以选择InfluxDB+Grafana+JMeter的后端监听器来实现

  • InfluxData:用作存储性能指标的临时指标存储的数据库
  • Grafana:Grafana是一个时间序列分析的开源平台,允许您根据时间序列数据创建实时图表
  • JMeter的后端监听器:后端监听器收集JMeter指标并将它们发送到临时指标存储

③其他解决方案

kylinTOP测试与监控平台(商用版)
LoadRunner(商用版)
NeoLoad(商用版)
Load impact(免费使用)

当然市场上还有一些解决方案,但是大多都要收费,所以不再赘述了,详情可以了解这篇JMETER结果分析,我很多内容都是参考他的解决方案的。

2.简单数据写入器+HTML报告DashBoard案例演示

这里我还是拿之前的测试案例来演示

①修改合适的测试规模

这里我加大测试压力,将线程数改为1000,循环30次
在这里插入图片描述

②添加简单数据写入器

新增一个简单数据写入器
在这里插入图片描述
修改输出路径到合适的目录下,同时保存的文件以jtl结尾
在这里插入图片描述

③运行生成文件

点击运行图标,运行完成后在对应目录下你应该能找到这个jtl文件
在这里插入图片描述

④生成HTML报表

点击工具->Generate HTML report
在这里插入图片描述
在result files 一栏,我们选择之前导出的jtl文件。

在用户配置文件一栏我们可以选择bin目录下有的user.properties文件,也可以根据官网用户手册去配置一个。这里我们选择bin目录下的文件即可。

输出目录我们选择一个合适的空目录即可。
在这里插入图片描述
点击generate report 即可生成报告
在这里插入图片描述

点击index.html即可看到测试结果
在这里插入图片描述

在这里插入图片描述

3.结果分析

报告图表很多,以下几个我们需要特别注意:

①成功率

在仪表盘,我们可以清楚看到成功请求的占比,在本次测试中,成功率99.9%,这是完全可以接受的
在这里插入图片描述

②响应时间变化

在这里插入图片描述
在这里我们可以看到测试中响应时长的变化,最小值一般不值得参考,值得参考的响应时长一般是90%-99%的响应时长,我们需要保证至少90%的请求响应时长在用户可接受范围内(具体可容忍时长视具体的业务场景而变化)

在这次测试中请求时长达到了恐怖的9000ms,一般用户是没办法忍受的,所以,在1000个用户下(1000个模拟线程),系统响应没法达到用户期望。

③TPS

TPS 即 Transactions Per Second的缩写,每秒处理的事务数目。
这个是我们经常拿来当做系统性能好坏的指标之一,也是在微服务架构中最常提到的词。

在这里插入图片描述

这里我们可以看到我们测试的接口TPS大概在138左右。

4.性能优化方案

根据测试报告所表现出来的性能,我们可以结合实际cpu、内存负载率去判断系统瓶颈,针对自己的业务场景进行优化。

由于博主也没有过多调优经验,在此也就不多赘述了,未来如果遇到相关的问题了再回来补充。

最后,
愿大家以梦为马,不负人生韶华!
与君共勉

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/qq_46101869/article/details/122134619

智能推荐

saas平台 saas服务 什么是saas_saas平台、saas服务、saas系统-程序员宅基地

文章浏览阅读470次,点赞2次,收藏2次。借鉴: https://www.zhihu.com/question/35087138我摘抄到这样一段话_saas平台、saas服务、saas系统

从ES5到ESNext-这是自2015年以来添加到JavaScript的所有功能-程序员宅基地

文章浏览阅读2.6k次,点赞3次,收藏2次。I wrote this article to help you move from pre-ES6 knowledge of JavaScript and get you quickly up to speed with the most recent advancements of the language. 我写这篇文章是为了帮助您摆脱ES6之前JavaScript知识,并Swift掌握该语..._es5 next() 和next

基于BP神经网络手写数字和字母识别-程序员宅基地

文章浏览阅读582次,点赞7次,收藏19次。这个程序是在MATLAB中编写,基于BP神经网络的文字符号识别系统的具体实现,该系统既可以实现单一手写字符,也可以实现一连串的字符,而且具有较高的准确率。用来测试结果的图片我选择的是在纸上写的字符和在电脑上的软件画板上写的字符,我将根据不同的书写方式来进行测试。我的字符共有2类,一共有36个字符,所以需要设计出可以识别36个字符的神经网络,实现把输入的字符能够在输出准确的识别出来。我选择用一个层隐含层的三层神经网络来实现函数的映射关系,如果隐含层的层数太多的话,训练的时间会增加太多, 太过于复杂。

太难了!2021计算机考研这么多大学专业课变化!-程序员宅基地

文章浏览阅读9.1k次,点赞4次,收藏16次。小编每年都在整理专业课变化的大学名单:【19考研】复习大半年,这些学校考试科目却变了【计算机/软件专业】【20考研】48所大学!计算机/软件专业课变化的大学名单!下面是小编发现的今年考试..._408和853

smartconfig一键配置udp原理_为什么smart config使用udp-程序员宅基地

文章浏览阅读4.6k次。1、一种基于WIFI通信的电子设备接入网方法,其特征在于,所述方法包括: 步骤S1:发送端将需传输的原始数据信息加密为十六进制形式的待发送数据; 步骤S2:发送端将待发送数据以及数据索引加入多播IP地址; 步骤S3:发送端将该多播IP地址映射为对应的多播MAC地址; 步骤S4:发送端重复发出包含该多播MAC地址的多播数据包; 步骤S5:接收端根_为什么smart config使用udp

btslab全攻略——搭建安装和sql注入-程序员宅基地

文章浏览阅读1.1k次。一、介绍直接引用官方说明BTS PenTesting Lab is an open source vulnerable web application, created by Cyber Security & Privacy Foundation (www.cysecurity.org). It can be used to learn about many different types of web application vulnerabilities.Currently, th_btslab

随便推点

Android UI框架之 XUI-程序员宅基地

文章浏览阅读2.2k次。TextView、Button、EditText、ImageView、Spinner、Picker、Dialog、PopupWindow、ProgressBar、LoadingView、StateLayout、FlowLayout、Switch、Actionbar、TabBar、Banner、GuideView、BadgeView、MarqueeView、WebView、SearchView等一系列的组件和丰富多彩的样式主题。需要定义各种资源文件。具体的组件API使用挺多的。市面上好用的三方UI也不少。_android ui框架

h3csnmp管理命令_如何配置H3C SNMP配置实例-程序员宅基地

文章浏览阅读530次。配置Agent# 配置Agent的IP地址为1.1.1.1/24,并确保Agent与NMS之间路由可达。(配置步骤略)# 设置SNMP基本信息,包括版本、团体名。 system-view[Sysname] snmp-agent sys-info version v1 v2c[Sysname] snmp-agent community read public[Sysname] snmp-agent ...

docker-compose使用多个docker-compose.yaml配置文件创建容器_容器中多个yaml-程序员宅基地

文章浏览阅读4.6k次。docker-compose.yaml文件创建容器是十分方便的,只用运行docker-compose up -d就可创建好配置文件里所有的容器了,但是如果有多个容器,又不想都放在一个docker-compose.yaml文件里怎么办呢?没关系,docker-compose命令的-f参数支持使用多个配置文件,1)一次使用多个文件docker-compose -f ./docker-compose.a.yaml -f ./docker-compse.b.yaml up -d如果是多个文件就使用多_容器中多个yaml

系统架构设计师-第12章-信息系绍酣忽如何里论与实践-软考-学习笔记(1)-程序员宅基地

文章浏览阅读600次,点赞9次,收藏5次。定义1 : 软件或计算机系统的信息系统架构是该系统的一个(或多个)结构,而结构由软件元素、元素的外部可见属性及它们之间的关系组成。定义2: 信息系统架构为软件系统提供了一个结构、行为和属性的高级抽象, 由构成系统元素的描述、这些元素的相互作用、指导元素集成的模式及这些模式的约束组成。定义3: 信息系统架构是指一个系统的基础组织,它具体体现在:系统的构件,构件之间、构件与环境之间的关系,以及指导其设计和演化的原则上。

全景图拼接和视频行人检测(Python + opencv)-程序员宅基地

文章浏览阅读326次,点赞5次,收藏6次。3. 根据关键点特征和描述符, 对两张图像进行匹配, 得到若干匹配点对, 并移除错误匹配4. 使用Ransac算法和匹配的特征来估计单应矩阵(homography matrix)5. 通过单应矩阵来对图像进行仿射变换6. 两图像拼接,重叠部分融合7. 裁剪以获得美观的最终图像本次实验通过拍摄多组不同的图片来实现图像的拼接.这里拼接的结果如下图这里获得的图像为拼接后的公共部分,拼接效果并不明显。以下实验用例来自。

Android开发者跳槽面试,含BATJM大厂,Android开发全套学习-程序员宅基地

文章浏览阅读647次,点赞14次,收藏10次。本文的特点在于将繁琐的知识化为系列专题的形式展现给读者,当你能跟随博主构建的体系化学习知识点时,恭喜你,你已经干掉了BAT、字节、网易等大厂的几乎80%以上的Android开发人员。一共十个专题,包括了Android进阶所有学习资料,Android进阶视频,Flutter,java基础,kotlin,NDK模块,计算机网络,数据结构与算法,微信小程序,面试题解析,framework源码!接下来给大家介绍一份体系化的学习资料,是由我和我的伙伴们历经4个多月,整理编写而成的,他考的是策略模式+工厂模式。