平均响应时间是否应该包括失败的事务？

Question

在 loadrunner 报告中，它不包括用于计算平均响应时间的失败事务，但在 JMeter 中，它还包括用于计算平均响应时间的失败事务。我在这里有点困惑。计算平均响应时间的最佳方法是什么？它是否应该包括失败的交易？详细解释将不胜感激。

Answer 1

这取决于您的“交易”究竟在哪里失败。

如果它到达服务器，“命中”（或多次命中），启动请求处理并以不成功的状态代码失败 - 我相信它应该包含在内，因为您的负载测试工具已触发请求并且它是被测应用程序未能正确或按时响应。

如果“事务”由于缺少测试数据或负载测试工具配置不正确而未启动 - 则不应包含在内。但是，这意味着您的测试不正确，需要修复。

因此，对于表现良好的测试，我会将所有内容包含在报告中，并可能准备 3 个视图：

1. 一切（包括通过和失败的交易）
2. 只有成功
3. 仅失败

在 JMeter 中，您可以使用 Filter Results Tool 从最终报告中删除失败的事务，可以使用 JMeter Plugins Manager 安装该工具

Answer 2

失败的交易可能比通过的交易更快。例如，一个 4xx 或 5xx 状态消息可能几乎立即返回到客户端。获得足够的这些错误，您的平均响应时间将大大减少。事实上，如果我是一个肆无忌惮的测试人员，因为我的测试失败程度而受到谴责，我可能会在我的数据集中包含很多“快速响应”来故意扭曲响应时间，这样我的利益相关者就不会再对我大喊大叫了.

并不是每次都会发生这种情况。