分布式压测
需求场景
一些关键接口需要压测到很高的QPS
需要设置更多的线程去模拟虚拟用户去请求接口
假如需要模拟2万个用户
因为jemeter使用java语言开发
每创建一个线程
jvm默认会为每个线程分配1M的堆栈内存空间
那么就需要20G内存
一般压测机器是4核8G或8核16G
因此需要更多台机器共同完成施压请求
分布式压测示意图
meter分布式测试环境中有两个角色:Master和Slaves
1、Master节点:向参与的Slaves节点发送测试脚本,并聚合Agent节点的执行结果,部署一台
2、Slaves节点:接收并执行Master节点发送过来的测试脚本,并将执行结果返回给Master,可部署多台
安装slave节点
docker pull runcare/jmeter-slave
docker run -it -d --name slave01 runcare/jmeter-slave
docker run -it -d --name slave02 runcare/jmeter-slave
docker run -it -d --name slave03 runcare/jmeter-slave
准备测试脚本
test.jmx
查看slave机器的IP
docker inspect -f '{{ .Name }} => {{ .NetworkSettings.IPAddress }}' $(docker ps -q)
启动master docker并执行测试脚本
存放test.jmx脚本的目录
/Users/mengfanxiao/Documents/stream/jemeter/jmx/
命令
result=`date +"%Y%m%d%H%M%S"` && docker run --rm -v /Users/mengfanxiao/Documents/stream/jemeter/jmx/:/data runcare/jmeter-master jmeter -n -t /data/test.jmx -l /data/$result.jtl -j /data/$result.log -e -o /data/$result -R 172.17.0.6,172.17.0.7,172.17.0.8
或者
docker run --rm -v $(pwd):/data runcare/jmeter-master jmeter -n -t /data/test.jmx -l /data/result.jtl -j /data/result.log -R 172.17.0.6,172.17.0.7,172.17.0.8
结果文件
生产的结果文件,日志文件和报表文件在脚本文件test.jmx同一目录下
如果压测脚本中使用到了csv数据源文件,需要提前复制到Slaves的/data目录下
注意事项
-
master和slaves需要在同一个网段
如果mac电脑Master使用安装在mac电脑中的Jmeter
Slaves使用Docker中的Slaves
需要在启动Slaves时将端口映射出来
docker run -it -d -p 1099:1099 -p 60001:60001 runcare/jmeter-slave
-
执行Master发送脚本时也需要指定server.hostname和server.rmi.localport
进入test.jmx所在目录
result=`date +"%Y%m%d%H%M%S"` && jmeter -n -t test.jmx -l $result.jtl -j $result.log -e -o $result -Djava.rmi.server.hostname=30.208.47.45 -Dserver.rmi.localport=60002 -Dserver_port=1098
Dockerfile源码
https://gitee.com/pingfanrenbiji/resource/tree/master/%E5%88%86%E5%B8%83%E5%BC%8Fjemeter
Jeecgboot微服务Feign
示例
服务jeecg-cloud-system 调用 jeecg-cloud-demo
jeecg-cloud-demo 服务接口
-
接口
-
实现类
-
服务接口
jeecg-cloud-system编写feign客户端
方式一 feign客户端
-
启动类加上@EnableFeignClients
-
编写feign客户端
-
编写测试方法
方式二 动态feign客户端
-
启动类 @EnableFeignClients
同上
-
编写feign接口调用
同上
-
编写测试方法
参数一表示feign接口类
参数二表示类名称
feign原理
-
架构图
-
feign扫包和注册细节
-
FeignClientFactoryBean 解析
-
代理的实现过程
-
代理invoke的实际执行过程
xxl-job定时任务集成
引入依赖
客户端demo编写
修改 jeecg-dev.yaml 配置文件
-
开启 xxljob 并 修改 xxljob-admin的服务连接配置
-
启动xxl-job服务
数据库脚本
https://gitee.com/pingfanrenbiji/jeecg-boot/blob/1e3a4d6a6f53589a3cd53fd18c62bf4375467447/jeecg-boot/jeecg-cloud-module/jeecg-cloud-xxljob/doc/db/tables_xxl_job.sql
配置邮箱通知
开启邮箱服务并生成授权码
设置IMAP服务的SSL加密方式
https://service.mail.qq.com/cgi-bin/help?subtype=1&&id=28&&no=331
启动服务
界面访问
http://localhost:9080/xxl-job-admin
admin
123456
-
创建定时任务
新增执行器
新增定时任务
测试定时任务
查看执行日志