如何搭建JMeter分布式集群环境来进行性能测试

server/2024/12/4 4:01:03/

在性能测试中,当面对海量用户请求的压力测试时,单机模式的JMeter往往力不从心。如何通过分布式集群环境,充分发挥JMeter的性能测试能力?这正是许多测试工程师在面临高并发、海量数据时最关注的问题。那么,如何轻松搭建JMeter分布式集群环境,实现性能测试的最大化呢?

你是否也曾为测试负载过大而不知所措?你是否对JMeter的分布式集群功能充满好奇?今天,我们将详细讲解如何通过搭建JMeter分布式集群环境,帮助你轻松应对高并发、高负载的性能测试需求!

  • 分布式测试的优势
    分布式测试环境中,多个负载机(Slave)协同工作,可以生成更高的并发量,突破单机的资源限制。

  • 真实案例
    某大型电商平台曾通过JMeter分布式集群测试,模拟上百万用户访问场景,精准定位系统瓶颈,成功避免了购物节期间的崩溃事故。

前提条件

  在开始之前,请确保满足以下前提条件:

  ·确保 JMeter 能够访问待测试的服务器(可以通过虚拟机上的 curl 命令来检查连通性),如果无法访问,你可能需要调研当前环境是否能够用来作为压力源;

  · 确保所有系统上使用相同版本的 JMeter(我们当前使用的是 5.6.3)。混用不同版本可能无法正常工作;

  · 确保系统上的防火墙已禁用或正确打开了相关端口;

  概念

  控制节点:运行 jmeter-client 的系统,它控制测试。该系统可以是你的笔记本电脑(需要先打开防火墙)或虚拟机。

  工作节点:运行 jmeter-server 的系统,它接收来自 jmeter-client 的指令并向目标系统发送请求,通常是虚拟机。

  目标:我们计划进行压力测试的 Web 服务器。

  安装

  对于 MacOS

  使用 Homebrew 安装 JMeter,并通过 jmeter --version 命令验证安装:

 brew install jmeterjmeter --version

  在我编写本文时,使用的版本是 5.6.3。

  对于 Ubuntu20

  不要 使用 apt install jmeter 命令安装 JMeter,因为 apt 安装的版本已过时(2.13),加载 .jmx 文件将会报错从而无法正常工作。

  手动安装:

  1. 在 VM 上安装 JDK:

  sudo apt install openjdk-11-jre-headless`

  2. 从 https://jmeter.apache.org/download_jmeter.cgi 下载压缩包文件(通过你的 笔记本电脑),然后将其上传至 VM。

  3. 使用 scp/rsync 上传至虚拟机,然后解压最新的 JMeter 压缩包。在笔记本电脑上输入以下命令(请记得修改目标目录):

  rsync -avz apache-jmeter-5.6.3/ <remote-host>:/path/to/place

  4. 将文件移动至正确位置并修改 PATH 环境变量:

  # 移动至合适的目录,比如 /opt/jmeter sudo mv /path/to/place /opt/ # 将其添加到 PATH,你可以将其写入 ~/.bashrc 文件以持久化配置 vim ~/.bashrcexport PATH=/opt/jmeter/bin:$PATH # 退出 vim 并使用 source 命令生效 source ~/.bashrc

  5. 检查版本,确保一切就绪:

  jmeter --version    

  输出结果应如下所示:

      _    ____   _    ____ _   _ _____       _ __  __ _____ _____ _____ ____     / \  |  _ \ / \  / ___| | | | ____|     | |  \/  | ____|_   _| ____|  _ \    / _ \ | |_) / _ \| |   | |_| |  _|    _  | | |\/| |  _|   | | |  _| | |_) |   / ___ \|  __/ ___ \ |___|  _  | |___  | |_| | |  | | |___  | | | |___|  _ <  /_/   \_\_| /_/   \_\____|_| |_|_____|  \___/|_|  |_|_____| |_| |_____|_| \_\ 5.6.3  Copyright (c) 1999-2024 The Apache Software Foundation

  配置

  在运行分布式模式之前,需要完成以下配置:

  在控制节点

  将服务器 IP 添加到客户端的 Properties 文件中

  在 $JMETER_HOME/bin/jmeter.properties 文件中(本文的路径是 /opt/jmeter/bin/jmeter.properties),找到名为 "remote_hosts" 的单元,添加正在运行的 JMeter 服务器的 IP 地址。可以添加多个服务器,用逗号分隔,例如:

  # Edit the line: remote_hosts=127.0.0.1 and configure as below:remote_hosts=10.0.0.1,10.0.0.2,10.0.0.3

  通过更改值并取消注释来禁用 rmi.ssl:

  server.rmi.ssl.disable=true

  同时,强烈建议将默认的 jmeter.reportgenerator.overall_granularity 值从 60 秒更改为 5 秒,以获得更好的报告体验!

  jmeter.reportgenerator.overall_granularity=5000

  否则,你的报告可能就会长成这样:


  更改此值后,上述的报告将更易读:


  在工作节点

  通过更改值并取消注释来禁用 rmi.ssl:

  server.rmi.ssl.disable=true

  然后启动 jmeter-server 以监听来自控制节点的命令:

  jmeter-server

  你应看到如下输出:

  $ jmeter-server   
WARN StatusConsoleListener The use of package scanning to locate plugins is deprecated and will be removed in a future release WARN StatusConsoleListener The use of package scanning to locate plugins is deprecated and will be removed in a future release WARN StatusConsoleListener The use of package scanning to locate plugins is deprecated and will be removed in a future release WARN StatusConsoleListener The use of package scanning to locate plugins is deprecated and will be removed in a future release Created remote object: UnicastServerRef2 [liveRef: [endpoint:[10.0.0.1:38803](local),objID:[-7d9e7ab6:1916e54ddb2:-7fff, -6565134591293374723]]]

​​​​​​​

  使用方式

  单节点模式

  使用单节点模式进行调试,命令如下:

  jmeter -n -t <script_path> -l <results-file>

  选项 -n:以非 GUI 模式运行 JMeter

  选项 -t:要运行的 JMeter 测试(.jmx)文件

  选项 -l:指定结果日志文件

  分布式模式

  注意:

  所有服务器将运行相同的测试计划。JMeter 不会在服务器之间分配负载,每台服务器都会运行完整的测试计划。因此,如果你设置 1000 个线程并有 6 台 JMeter 服务器,你最终将注入 6000 个线程。

  如果 jmeter.properties 文件配置正确,只需在执行命令时添加 -r 选项,例如:

  jmeter -n -t <script_path> -l <results-file> -r

  选项 -r:使用 remote_hosts 属性中指定的所有节点。

  你还可以使用 -R 选项指定希望使用的节点,例如:

  jmeter -n -t <script_path> -l <results-file> -R 10.0.0.1,10.0.0.2

  此时只有 10.0.0.1 和 10.0.0.2 会参与测试,输出将如下所示:​​​​​​​

  $ jmeter -n -t demo.jmx -l result.csv -r  WARN StatusConsoleListener The use of package scanning to locate plugins is deprecated and will be removed in a future release  WARN StatusConsoleListener The use of package scanning to locate plugins is deprecated and will be removed in a future release  WARN StatusConsoleListener The use of package scanning to locate plugins is deprecated and will be removed in a future release  WARN StatusConsoleListener The use of package scanning to locate plugins is deprecated and will be removed in a future release  Creating summariser <summary>  Created the tree successfully using demo.jmx  Configuring remote engine: 10.0.0.1  Configuring remote engine: 10.0.0.2  Starting distributed test with remote engines: [10.0.0.1, 10.0.0.2] @ 2024 Aug 20 14:11:02 CST (1724134262441)  Warning: Nashorn engine is planned to be removed from a future JDK release  Remote engines have been started:[10.0.0.1, 10.0.0.2]  Waiting for possible Shutdown/StopTestNow/HeapDump/ThreadDump message on port 4445  summary +      1 in 00:00:00 =   17.2/s Avg:     1 Min:     1 Max:     1 Err:     0 (0.00%) Active: 2 Started: 2 Finished: 0  summary +   5999 in 00:00:10 =  605.8/s Avg:     0 Min:     0 Max:     3 Err:     0 (0.00%) Active: 0 Started: 200 Finished: 200  summary =   6000 in 00:00:10 =  602.2/s Avg:     0 Min:     0 Max:     3 Err:     0 (0.00%)  Tidying up remote @ 2024 Aug 20 14:11:12 CST (1724134272743)  … end of run

  HTML 报告生成

  要从现有结果文件生成报告,使用以下命令:

  jmeter -g <result-file> -o <Path to output folder>

  或者在负载测试完成后立即生成报告,使用以下命令:

  jmeter -n -t <script_path> -l <result-file> -r -e -o <Path to output folder>

  假设你运行以下命令:

  jmeter -n -t demo.jmx -l result.csv -r -e -o report

  然后你将看到如下输出:​​​​​​​

  $ ll ./report/total 32drwxr-xr-x  4 dohong users 4096 Aug 20 14:44 ./drwx------ 10 dohong users 4096 Aug 20 14:44 ../drwxr-xr-x  5 dohong users 4096 Aug 20 14:44 content/-rw-r--r--  1 dohong users 9669 Aug 20 14:44 index.htmldrwxr-xr-x  5 dohong users 4096 Aug 20 14:44 sbadmin2-1.0.7/-rw-r--r--  1 dohong users  890 Aug 20 14:44 statistics.json

  双击打开 index.html 文件你就会得到类似如下的报告:

  左侧导航栏可以切换不同的页面查看不同的统计数据和图表,至此,分布式压测的环境搭建就全部大功告成了。

  注意事项

  ·jmeter.reportgenerator.overall_granularity 的值从 60000 改为 5000 强烈建议,这可以带来更好的报告体验。

  · 无需手动同步测试脚本到工作节点,JMeter 会为你完成同步,但仍需要将本地脚本同步到控制节点;

  · 使用 CLI 模式 而非 GUI 模式,避免性能下降;

  · 使用尽可能少的监听器;如果使用 -l 标志记录结果,监听器可以删除或禁用。

  · 在负载测试过程中不要使用 "查看结果树" 或 "查看表格中的结果" 监听器,它们应仅在脚本调试阶段使用,否则性能可能会下降 3 倍!

  · 如果测试需要大量数据,尤其是随机化或加密/解密数据,请将测试数据提前生成并通过 CSV 数据集读取文件,这可以避免运行时浪费资源。

在当前的技术趋势中,微服务架构云原生的普及,使得系统规模更庞大、模块更多,性能测试的重要性更加突出。JMeter分布式测试成为企业应对复杂性能测试需求的首选方案。

搭建JMeter分布式集群不仅提升了性能测试的能力,也为系统性能优化提供了更加全面的数据支撑。掌握这项技能,让你的性能测试如虎添翼

“高并发不是系统的敌人,而是推动性能优化的良师益友——关键在于你是否具备掌控它的能力!”

 


http://www.ppmy.cn/server/147187.html

相关文章

如何在Spark中使用gbdt模型分布式预测

这目录 1 训练gbdt模型2 第三方包python环境打包3 Spark中使用gbdt模型3.1 spark配置文件3.2 主函数main.py 4 spark任务提交 1 训练gbdt模型 我们可以基于lightgbm快速的训练一个gbdt模型&#xff0c;训练相对比较简单&#xff0c;只要把训练样本处理好&#xff0c;几行代码可…

set up RAGFlow on your Mac

个人思考&#xff1a;这些仅仅是工具&#xff0c;和人的思维实际还是有很大差距。 可能是我认知片面&#xff0c;你需要投喂大量的内容给它&#xff0c;它自己其实并不会思考&#xff0c;只是从它的认知里告诉它他知道的东西。举个不太巧当的例子&#xff0c;和以往的方式恰恰相…

深度学习读书笔记 绪论

深度学习是什么&#xff1f; 机器学习的分支。 深度学习问题也是指从有限样例中总结出一般的规律&#xff0c;应用在新的未知数据上的方法。 机器学习的三个基本要素 模型 机器学习任务首要弄明白的&#xff0c;也就是一个机器学习任务所面对的输入空间和输出空间。 输入…

android 阻止返回退出

一、重写返回按钮 //2024-12-02 Override public void onBackPressed() {// 在这里添加您的拦截逻辑// Toast.makeText(this, "返回键被拦截", Toast.LENGTH_SHORT).show();// super.onBackPressed();showExitDialog(); } 二、弹出提示 private void showExitDi…

ubuntu 20.04 安装 docker 后遇到的网络问题

问题 安装docker后&#xff0c;无法拉取hello-world镜像&#xff0c;&#xff1a; $ docker run --rm hello-world Unable to find image hello-world:latest locally docker: Error response from daemon: Get "https://registry-1.docker.io/v2/": net/http: req…

MySQL安装部署

安装 MySQL 官方 YUM 仓库&#xff1a; [rootlocalhost ~]# wget https://dev.mysql.com/get/mysql80-community-release-el7-3.noarch.rpm --2024-12-02 16:14:09-- https://dev.mysql.com/get/mysql80-community-release-el7-3.noarch.rpm Resolving dev.mysql.com (dev.my…

【数据结构实战篇】用C语言实现你的私有队列

&#x1f3dd;️专栏&#xff1a;【数据结构实战篇】 &#x1f305;主页&#xff1a;f狐o狸x 在前面的文章中我们用C语言实现了栈的数据结构&#xff0c;本期内容我们将实现队列的数据结构 一、队列的概念 队列&#xff1a;只允许在一端进行插入数据操作&#xff0c;在另一端…

Linux 进程管理之struct task_struct

文章目录 前言一、任务 ID二、信号处理三、任务状态四、进程调度五、运行统计信息六、进程亲缘关系七、进程权限八、内存管理九、文件与文件系统十、进程栈10.1 用户态函数栈10.2 内核态函数栈 参考资料 前言 进程是一个应用程序运行时刻的实例&#xff08;从进程的结构看&…