day20-性能测试的分类

文章目录

性能测试的分类
- 压力测试
- 负载测试
- 配置测试
- 基准测试
- 并发测试
- 容量测试
- 稳定性测试
什么时候（什么情况下）需要进行何种性能测试
- 上新系统
- 扩容
- 调优
- 修复
- 秒杀/团购
性能测试的介入时机
性能测试常见的指标
性能测试中常见的专业术语

性能测试的分类

从大的方面：

基于代码的性能测试（关注点是函数或者方法执行的效率）
基于协议的性能测试（关注服务器端的性能）（重点）
客户端的性能测试（页面或者客户端的响应时间）

压力测试

在一定的软硬件、网络条件下，模拟用户高并发（峰值负载），持续一段时间，检测系统的各项性能指标，关注峰值下的系统的性能表现【秒杀、团购、抢票】

目的：监测被测系统在峰值下的运行情况，给最坏的情况（系统崩溃）设计预案

场景模型：门型场景

集合点

所有线程数在集合点同时发起请求，同时结束请求

负载测试

在一定的软硬件、网络条件下，通过改变负载的方式，监测系统各项性能指标，得到系统在正常工作的情况下，系统的最大用户数、最佳用户数，定位系统的瓶颈

场景模型：拱形场景

慢慢的增加并发线程数找到系统的最佳用户数。

理发店模型假设：

理发店共有3名理发师
每位理发师剪一个头的时间都是1小时
每个顾客所能容忍的等待时间是等待时间+剪发时间是3小时，而且等待时间越长，顾客的满意度越低，如果3个小时还不能剪完头发，顾客会立马走人。

当顾客数量是3人，响应时间无明显变化，资源利用率出现拐点时，就是最佳并发用户数。当超过3人时响应时间逐渐增加，到达9人时响应时间出现拐点，吞吐量开始下降，此时达到了最大并发用户数

所谓的性能，是负载、吞吐量、可接受的响应时间和资源利用率之间的一种平衡。

以下文字是摘录

对于一个确定的被测系统来说，在某个具体的软硬件环境下，它的“最佳并发用户数”和“最大并发用户数”都是客观存在。以“最佳并发用户数”为例，假如一个系统的最佳并发用户数是50，那么一旦并发量超过这个值，系统的吞吐量和响应时间必然会 “此消彼长”；如果系统负载长期大于这个数，必然会导致用户的满意度降低并最终达到一种无法忍受的地步。所以我们应该保证最佳并发用户数要大于系统的平均负载。

要补充的一点是，当我们需要对一个系统长时间施加压力——例如连续加压3-5天，来验证系统的可靠性或者说稳定性时，我们所使用的并发用户数应该等于或小于“最佳并发用户数”——大家也可以结合上面的讨论想想这是为什么 ^_

而对于最大并发用户数的识别，需要考虑和鉴别一下以下两种情况：
         当系统的负载达到最大并发用户数后，响应时间超过了用户可以忍受的最大限度——这个限度应该来源于性能需求，例如：在某个级别的负载下，系统的响应时间应该小于5秒。这里容易疏忽的一点是，不要把顾客因为无法忍受而离开时店内的顾客数量作为理发店的“最大并发用户数”，因为这位顾客是在3小时前到达的，也就是说3小时前理发店内的顾客数量才是我们要找的“最大并发用户数”。而且，这位顾客的离开只是一个开始，可能有会更多的顾客随后也因为无法忍受超长的等待时间而离开；
         在响应时间还没有到达用户可忍受的最大限度前，有可能已经出现了用户请求的失败。以理发店模型为例，如果理发店只能容纳6位顾客，那么当7位顾客同时来到理发店时，虽然我们可以知道所有顾客都能在可容忍的时间内剪完头发，但是因为理发店容量有限，最终只好有一位顾客打道回府，改天再来。
对于一个系统来说，我们应该确保系统的最大并发用户数要大于系统需要承受的峰值负载。

配置测试

改变软硬件配置（架构配置、参数配置），观测不同的配置条件下的性能状态

目的：找到最优的配置

基准测试

benchmark testing，在一定的软硬件、网络条件下，模拟单用户操作系统，监测系统各项性能指标。

目的：为后面深入的性能测试做一个数据对比

并发测试

测试同一模块、同一应用在高并发的情况下，接口工作是否正常

目的：主要是检查应用或者是接口在多用户情况下，是否存在缺陷（比如死锁等）

容量测试

在一定的硬件、网络条件下，改变数据库的容量，模拟多用户，监测各项性能指标的过程

目的：寻找数据库的容量的极限值

稳定性测试

主要强调长时间、正常负载情况下，观测系统各项指标的稳定性，不会出现致命的问题

比如7*24小时

一般至少是8小时、24小时、48小时

目的：检验系统长时间运行，系统的稳定性、是否有异常表现（宕机、出现致命问题等）

什么时候（什么情况下）需要进行何种性能测试

上新系统

用户场景（大量用户、同时使用、某个时间段内使用）
基准测试、负载测试、压力测试、容量测试

扩容

分析了解历史系统自身的性能表现，适当的扩容
基准、负载、压力、容量

调优

针对已上线的系统越来越慢，对系统进行优化配置，提升性能表现
基准测试、配置测试

修复

解决线上系统的开发死锁、内存泄漏等问题
并发测试

秒杀/团购

基准、负载、压力

性能测试的介入时机

是在功能、接口测试都已经完成之后再来做性能

性能测试常见的指标

响应时间
吞吐量
事务的处理能力
资源利用率
错误率

性能测试中常见的专业术语

集合点
关联
检查的：断言
用户数：在线用户数、并发用户数、系统用户数
- 并发用户数<在线用户数<系统用户数
PV
- 页面访问量PV
- 客户端向服务器提交的请求的数量，通常是作为网站系统的处理能力的衡量标准
UV
- Unique Visitor：独立用户访问量
- 根据用户数量来进行统计，访问系统一次只能算一个UV