Locust web性能测试实践

Locust web性能测试实践

Locust 是一个开源的负载测试工具,使用Python语言实现,其简洁、轻量、高效的并发机制基于Gevent协程,可以实现单机模拟生成较高的并发压力。具有分布式和可扩展的特点,能够帮助你评估系统的性能并找到潜在的瓶颈。

Locust 的主要特点:

  1. 使用 Python 编写测试脚本:你可以用 Python 编写用户行为脚本,定义各种用户操作和请求。
  2. 分布式测试:支持分布式测试,允许在多台机器上同时运行,从而模拟大量的并发用户。
  3. 实时 Web 界面:提供直观的 Web 界面,用于配置测试参数、启动和监控测试。
  4. 可扩展性强:可以通过编写自定义代码来扩展 Locust 的功能,满足不同测试需求。

1. 安装Locust

使用 pip 进行安装:

1
pip3 install locust -i https://mirrors.aliyun.com/pypi/simple/

查看安装版本:

1
locust -V

2. web demo应用

使用 Python 的 Flask 框架实现一个简单的web服务器,包含主页 (/) 和关于页 (/about),用于Locust执行测试。

2.1 安装Flask

使用pip安装:

pip3 install flask -i https://mirrors.aliyun.com/pypi/simple/

2.2 创建Flask应用

新建一个名为 app.py 的文件,编写如下代码:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
from flask import Flask, jsonify

app = Flask(__name__)

@app.route('/')
def index():
return jsonify(message="Welcome to the homepage!")

@app.route('/about')
def about():
return jsonify(message="This is the about page.")

if __name__ == '__main__':
app.run(debug=True, host='0.0.0.0', port=5000)

2.3 运行 Flask 应用

在终端中运行以下命令启动 Flask 服务器:

1
python app.py

默认情况下,Flask 服务器会在 http://localhost:5000 运行。你可以通过浏览器访问这个地址,查看主页和关于页是否正常显示。

3. 运行模式

Locust支持单机模式、分布式模式和无头模式。每种模式适用于不同的测试场景。

3.1 单机模式

适用于小规模测试。简单直接,只需在一台机器上运行 Locust。

一个简单的 Locust 测试脚本如下所示:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
# locust-test1.py
from locust import HttpUser, TaskSet, task, between

# 定义一个任务类继承TaskSet类
class UserBehavior(TaskSet):
# @task(1) 是装饰器,声明此方法是一个任务,权重为1。权重不写的话默认为1
@task(1)
def index(self):
self.client.get("/")
# @task(2) 是装饰器,声明此方法是一个任务,权重为2
@task(2)
def about(self):
self.client.get("/about")

# 定义一个运行类继承HttpUser类
class WebsiteUser(HttpUser):
tasks = [UserBehavior]
wait_time = between(1, 5)
host = "http://localhost:5000"

在这个脚本中,我们定义了一个 UserBehavior 类,其中包含两个任务:访问主页(index)和访问关于页(about)。然后我们定义了一个 WebsiteUser 类,指定用户行为、请求之间的等待时间以及测试的web服务器。

运行 Locust

在终端中运行以下命令启动 Locust:

1
locust -f locust-test1.py

配置和启动测试

打开浏览器访问 http://localhost:8089,在 Locust 的 Web 界面中设置测试参数,设置并发用户数为50,设置每秒增加的用户数为10,即以多快的速度增加用户。测试host为本机运行的flask服务器,运行时间为60秒。然后启动测试。

结果结果统计:

图标性能曲线:

测试报告下载:

3.2 分布式模式

适用于大规模测试。支持多台机器协同工作,能够模拟大量并发用户,包括 master 和 worker 节点,worker节点产生负载, master 节点主要负责协调和收集来自多个 worker 节点的数据。

运行方法

  • 启动 master:

    1
    locust -f locust-test1.py --master
  • 启动 worker:

    1
    2
    # worker机器同样需要安装locust
    locust -f locust-test1.py --worker --master-host=<master_ip>

worker运行后,master侧命令行会有worker已连接的打印,可以看到当前master下面连接的worker数量。

在浏览器中打开 http://<master_ip>:8089,配置测试参数并启动测试:

3.3 无头模式(Headless Mode)

适用于持续集成(CI)环境或不需要图形界面的场景。可以自动执行测试,并将结果输出到控制台或文件中。

运行方法

使用命令行参数配置和启动测试:

locust -f locust-test1.py --headless -u 100 -r 10 -H http://192.168.0.210:5000 --run-time 1m --csv=results

参数说明

  • --headless:无头模式运行。
  • -u--users:模拟的用户数。
  • -r--spawn-rate:每秒启动的用户数。
  • --run-time:测试运行时间,例如 1m 表示 1 分钟。
  • --csv:将测试结果输出到 CSV 文件。

3.4 总结

  • 单机模式 适用于简单的小规模测试。
  • 分布式模式 适用于大规模测试,通过多个 worker 节点协同工作来模拟大量并发用户。
  • 无头模式 适用于自动化测试和持续集成环境,可以在没有图形界面的情况下运行测试并输出结果。

4. locust运行参数说明

命令行选项 环境变量 配置文件字段 描述说明
-f, --locustfile LOCUST_LOCUSTFILE locustfile 要导入的Python模块文件,例如’../other.py’。默认为locustfile。
-H, --host LOCUST_HOST host 负载测试主机地址,例如’https://www.baidu.com'。
-u, --users LOCUST_USERS users 并发用户数。主要与--headless一起使用。您可以在测试期间使用”w”和”W”(增加1或10个用户)以及”s”和”S”(停止1或10个用户)来更改。
-r, --spawn-rate LOCUST_SPAWN_RATE spawn-rate 每秒产生用户的速率。主要与--headless一起使用。
--hatch-rate LOCUST_HATCH_RATE hatch-rate 启动虚拟用户的速率。
-t, --run-time LOCUST_RUN_TIME run-time 在指定的时间段后停止测试,例如(300s、20m、3h、1h30m等)。仅与--headless一起使用。默认为永久运行。
--web-host LOCUST_WEB_HOST web-host 绑定Web界面的主机。默认为’*’(所有接口)。
--web-port, -P LOCUST_WEB_PORT web-port 运行Web主机的端口地址。默认为8089。
--headless LOCUST_HEADLESS headless 禁用Web界面,立即开始负载测试。需要指定-u-t
--autostart LOCUST_AUTOSTART autostart 立即开始测试(不禁用Web UI)。使用-u-t控制用户数和运行时间。
--autoquit LOCUST_AUTOQUIT autoquit 在测试运行完成后 X 秒后完全退出 Locust。仅与--autostart一起使用。默认为保持Locust运行,直到使用 CTRL+C 关闭。
--headful LOCUST_HEADFUL headful 启用Headful模式。
--web-auth LOCUST_WEB_AUTH web-auth 使用基本身份验证打开Web界面。格式为username:password。
--tls-cert LOCUST_TLS_CERT tls-cert 用于HTTPS服务的TLS证书的路径。
--tls-key LOCUST_TLS_KEY tls-key 用于HTTPS服务的TLS私钥的路径。
--master LOCUST_MODE_MASTER master 以Master模式运行,用于分布式负载测试。
--master-bind-host LOCUST_MASTER_BIND_HOST master-bind-host Master节点绑定的主机名或IP地址。仅在与--master一起使用。默认为’*’(所有可用接口)。
--master-bind-port LOCUST_MASTER_BIND_PORT master-bind-port Master节点绑定的端口。仅在与--master一起使用。默认为5557。
--expect-workers LOCUST_EXPECT_WORKERS expect-workers 预期的分布式客户端数量。仅在与--headless一起使用时生效。
--expect-workers-max-wait LOCUST_EXPECT_WORKERS_MAX_WAIT expect-workers-max-wait 等待Worker连接的最长时间。默认为永远等待。
--worker LOCUST_MODE_WORKER worker 以Worker模式运行,用于分布式负载测试。
--master-host LOCUST_MASTER_NODE_HOST master-host Master节点的主机名或IP地址。仅在与--worker一起使用。默认为127.0.0.1。
--master-port LOCUST_MASTER_NODE_PORT master-port Master节点使用的端口。仅在与--worker一起使用。默认为5557。
-T, --tags LOCUST_TAGS tags 测试中要包含的标签列表,仅执行具有任何匹配标签的任务。
-E, --exclude-tags LOCUST_EXCLUDE_TAGS exclude-tags 要从测试中排除的标签列表,仅执行没有匹配标签的任务。
--csv LOCUST_CSV csv 将请求统计信息以CSV格式存储到文件中。
--csv-full-history LOCUST_CSV_FULL_HISTORY csv-full-history 将每个统计信息条目以CSV格式存储到_stats_history.csv文件中。
--print-stats LOCUST_PRINT_STATS print-stats 在控制台中周期性打印统计信息。
--only-summary LOCUST_ONLY_SUMMARY only-summary 仅打印摘要统计信息。
--reset-stats LOCUST_RESET_STATS reset-stats 完成后重置统计信息。在分布式模式下,应在Master和Worker上设置。
--html LOCUST_HTML html 将HTML报告存储到指定的文件路径。
--skip-log-setup LOCUST_SKIP_LOG_SETUP skip-log-setup 禁用Locust的日志记录设置。
--loglevel, -L LOCUST_LOGLEVEL loglevel 日志级别,选择DEBUG/INFO/WARNING/ERROR/CRITICAL。默认为INFO。
--logfile LOCUST_LOGFILE logfile 日志文件的路径。如果未设置,日志将输出到stderr。
--exit-code-on-error LOCUST_EXIT_CODE_ON_ERROR exit-code-on-error 在测试结果包含任何失败或错误时设置退出代码。默认为1。
-s, --stop-timeout LOCUST_STOP_TIMEOUT stop-timeout 退出之前等待模拟用户完成的任务的秒数。仅在运行Locust分布式时设置在主进程上。

有关更多详细信息,包括如何使用文件或环境变量设置选项,请参阅文档:https://docs.locust.io/en/stable/configuration.html

5. 参考

  1. 官方文档:http://docs.locust.io/en/stable/installation.html

  2. Locust性能测试之快速入门: https://www.cnblogs.com/xyztank/articles/16932194.html


Locust web性能测试实践
https://lldhsds.github.io/2024/06/16/Locust-web性能测试实践/
作者
XuShuai
发布于
2024年6月16日
许可协议