永康住房和城乡建设部网站,推广新产品最好的方法,建e网站官网案例,企业标准信息公共服务平台文章目录 压力测试核心性能指标及行业标准指标1#xff1a;响应时间指标2#xff1a;吞吐量#xff08;TPS)指标3#xff1a;失败率总结#xff1a; 压力测试核心性能指标及行业标准
在做压力测试时#xff0c;新手测试人员常常在看报告时倍感压力#xff1a;这么多性能… 文章目录 压力测试核心性能指标及行业标准指标1响应时间指标2吞吐量TPS)指标3失败率总结 压力测试核心性能指标及行业标准
在做压力测试时新手测试人员常常在看报告时倍感压力这么多性能测试指标分别是什么意思应该达到什么标准
本文将结合实际压测报告帮助您快速理解压测时的主要性能指标了解如何解读该指标以及通常情况下应该达到的标准。
指标1响应时间 性能测试过程是模拟用户真实视角的请求过程。一个请求的“响应时间”指的是从开始跟被测服务建立连接、发送请求内容、再等待服务响应、最后完整接收回包的整个时间长度。 这里需要注意的是通常研发人员考量的接口响应时间是从服务接收到请求后到发出请求的时间长度这其实是性能测试报告内“响应时间”的“子集”。 平均响应时间作为报告的重要的指标之一计算方法是计算整个压测过程中全部请求的响应时间平均值。 除了平均响应时间压测人员通常还会关注最小、最大、90%、95%、99%响应时间。计算方式是将所有请求的响应时间按从小到大排序其中最小、90%、95%、99%和最大分位的数据即上述指标的值。例如95%响应时间意味着整个压测过程中95%的请求的响应时间都小于该值。 响应时间应该如何分析在实际业务中应该达到什么样的标准呢 图片为腾讯某真实线上运营活动接口的压测报告截图在模拟5000用户并发压测5分钟期间平均响应时间为48毫秒失败率低于1%该项指标符合该业务预期。
压测人员需要就趋势图中偶发超长响应时间进行分析联动开发人员根据traceID跟踪分析具体原因即可。
响应时间与客户体验息息相关有说法称当页面的加载速度大于1秒时搜索引擎SEO会对网站进行降权处理。
虽然响应时间并没有严格的通用标准但这里我们给一些行业通用的标准给大家做一个参考。 对于大部分互联网行业业务来说接口的平均响应时间普遍优于其他行业核心接口响应时间通常小于200毫秒普通接口小于500毫秒部分特殊接口也以小于1秒为佳。当超出相应标准时需研发人员对服务进行扩容或性能优化。 对于非互联网行业来说响应时间标准要放宽一些但通常建议核心接口响应时间小于500毫秒普通接口小于1秒特殊接口也不要超过3秒为佳否则将较大程度影响用户使用体验。
指标2吞吐量TPS) 吞吐量度量了单位时间内被测服务可以处理多少请求所以是服务性能的重要指标。压测过程中吞吐量通常使用TPS进行度量。
什么是TPS呢TPS的全称是Transaction Per Second也就是被测服务每秒处理的事务数TPS的计算方式是用压测时间段内的总事务数除以压测总时长秒数即可得到每秒处理事务数。
在压测过程中优测压测平台会每秒计算一次当前这一秒的TPS压测过程结束后其中最小和最大的即最小和最大TPS求均值即可得出平均TPS。
这里需要注意的是**TPS的指标必须结合压测时配置的并发线程数即模拟用户数一起分析。在被测服务未达瓶颈的时候线程数越大TPS越大。**举一个例子平均响应时间是200毫秒的某业务假如仅模拟1用户数发压那么TPS等于5显然并不代表服务的极限吞吐量水平。
通常情况下我们会通过不断增加线程数在错误率符合预期的前提下探索TPS的上限作为当前部署配置下的服务吞吐量指标。
那么报告内的TPS趋势图该如何分析该达到什么样的标准呢 图片为某业务接口的压测报告截图模式为梯度增压模式也被称为“摸高”模式即通过逐步增加并发量探索被测服务吞吐量瓶颈。如图所示在并发数第一次上升的过程中TPS吞吐量大幅提升但在后续“爬坡”过程中吞吐量基本保持平稳这说明被测接口的吞吐量已达到瓶颈。
TPS通常根据业务需求来进行设定如分析该业务历史真实线上业务数据的峰值乘以一定的buffer作为此次压测目标。或者对于暂未上线的活动或者功能根据产品或运营人员预估的峰值请求数乘以一定的buffer作为此次压测目标。Buffer值通常为1.5-3倍视风险情况而定。
这里我们也给出一些常见业务类型的TPS情况仅供参考。电商或大规模的运营活动如秒杀等场景因为瞬间高峰值请求情况TPS通常能达到百万级别。普通的互联网业务通常吞吐量根据业务重要程度不同在1万至10万之间。对于非互联网行业产品或小规模系统因为用户量不大TPS通常在5万以下。
指标3失败率 失败率是性能测试过程中最好理解也是最重要的指标。
失败率的计算方法是用总失败请求数除以总请求数。通常标准为比较严格的要求100%成功或者相对可接受的失败率低于1%也就是100次请求业务中有一个用户会遭遇失败。
需要注意的是很多压测人员会简单的使用http响应码作为判断标准200即成功其他即失败。在实际经验中经常会出现响应码是200但响应结果不符合预期的情况。所以需要压测人员根据业务逻辑配置详细错误断言和描述精准评估失败率。
总结
不管是哪个指标其实最重要的不是对指标本身是否达标的度量而是通过指标评估被测系统是否达到预期以及对具体问题的分析和定位。需尽可能通过查看日志、链路追踪等方法定位问题根源并解决。
如下图实例根据错误请求的具体请求和响应信息分析具体原因。并通过链路追踪精准定位问题。 优测压力测试平台简介 优测压力测试是一款在线云原生全链路压测平台百万级并发即召即用。兼容JMeter脚本一键上传即可随时发压免去压测工具搭建成本。除在线压测工具外也支持私有化部署、定制化开发及专家压测服务。欢迎大家登录优测官网免费体验点击原文了解压测产品详情。
