0
点赞
收藏
分享

微信扫一扫

Jeecgboot Feign、分布式压测、分布式任务调度

分布式压测

需求场景

一些关键接口需要压测到很高的QPS
需要设置更多的线程去模拟虚拟用户去请求接口
假如需要模拟2万个用户
因为jemeter使用java语言开发
每创建一个线程
jvm默认会为每个线程分配1M的堆栈内存空间
那么就需要20G内存
一般压测机器是4核8G或8核16G
因此需要更多台机器共同完成施压请求

分布式压测示意图

Jeecgboot Feign、分布式压测、分布式任务调度_压测

meter分布式测试环境中有两个角色:Master和Slaves

1、Master节点:向参与的Slaves节点发送测试脚本,并聚合Agent节点的执行结果,部署一台

2、Slaves节点:接收并执行Master节点发送过来的测试脚本,并将执行结果返回给Master,可部署多台

安装slave节点

docker pull runcare/jmeter-slave

docker run -it -d --name slave01 runcare/jmeter-slave
docker run -it -d --name slave02 runcare/jmeter-slave
docker run -it -d --name slave03 runcare/jmeter-slave

Jeecgboot Feign、分布式压测、分布式任务调度_docker_02

准备测试脚本

​test.jmx​

Jeecgboot Feign、分布式压测、分布式任务调度_docker_03

查看slave机器的IP

docker inspect -f '{{ .Name }} => {{ .NetworkSettings.IPAddress }}' $(docker ps -q)

Jeecgboot Feign、分布式压测、分布式任务调度_压测_04

启动master docker并执行测试脚本

​存放test.jmx脚本的目录​

/Users/mengfanxiao/Documents/stream/jemeter/jmx/

​命令​

result=`date +"%Y%m%d%H%M%S"` && docker run --rm -v /Users/mengfanxiao/Documents/stream/jemeter/jmx/:/data runcare/jmeter-master jmeter -n -t /data/test.jmx -l /data/$result.jtl -j /data/$result.log -e -o /data/$result -R 172.17.0.6,172.17.0.7,172.17.0.8

或者

docker run --rm -v $(pwd):/data runcare/jmeter-master jmeter -n -t /data/test.jmx -l /data/result.jtl -j /data/result.log  -R 172.17.0.6,172.17.0.7,172.17.0.8

Jeecgboot Feign、分布式压测、分布式任务调度_客户端_05

结果文件

生产的结果文件,日志文件和报表文件在脚本文件test.jmx同一目录下

如果压测脚本中使用到了csv数据源文件,需要提前复制到Slaves的/data目录下

Jeecgboot Feign、分布式压测、分布式任务调度_客户端_06

注意事项

  • master和slaves需要在同一个网段

如果mac电脑Master使用安装在mac电脑中的Jmeter
Slaves使用Docker中的Slaves
需要在启动Slaves时将端口映射出来

docker run -it -d -p 1099:1099 -p 60001:60001 runcare/jmeter-slave

  • 执行Master发送脚本时也需要指定server.hostname和server.rmi.localport

进入test.jmx所在目录

result=`date +"%Y%m%d%H%M%S"` && jmeter -n -t test.jmx -l $result.jtl -j $result.log -e -o $result -Djava.rmi.server.hostname=30.208.47.45 -Dserver.rmi.localport=60002 -Dserver_port=1098

Dockerfile源码

https://gitee.com/pingfanrenbiji/resource/tree/master/%E5%88%86%E5%B8%83%E5%BC%8Fjemeter

Jeecgboot微服务Feign

​示例​

服务jeecg-cloud-system 调用 jeecg-cloud-demo

jeecg-cloud-demo 服务接口

  • 接口

Jeecgboot Feign、分布式压测、分布式任务调度_docker_07

  • 实现类

Jeecgboot Feign、分布式压测、分布式任务调度_docker_08

  • 服务接口

Jeecgboot Feign、分布式压测、分布式任务调度_docker_09

jeecg-cloud-system编写feign客户端

方式一 feign客户端

  • 启动类加上@EnableFeignClients

Jeecgboot Feign、分布式压测、分布式任务调度_压测_10

  • 编写feign客户端

Jeecgboot Feign、分布式压测、分布式任务调度_客户端_11

  • 编写测试方法

Jeecgboot Feign、分布式压测、分布式任务调度_docker_12

方式二 动态feign客户端

  • 启动类 @EnableFeignClients

​同上​

  • 编写feign接口调用

​同上​

  • 编写测试方法

Jeecgboot Feign、分布式压测、分布式任务调度_压测_13Jeecgboot Feign、分布式压测、分布式任务调度_docker_14

参数一表示feign接口类
参数二表示类名称

Jeecgboot Feign、分布式压测、分布式任务调度_docker_15

feign原理

  • 架构图

Jeecgboot Feign、分布式压测、分布式任务调度_客户端_16

  • feign扫包和注册细节

Jeecgboot Feign、分布式压测、分布式任务调度_压测_17

  • FeignClientFactoryBean 解析

Jeecgboot Feign、分布式压测、分布式任务调度_docker_18

  • 代理的实现过程

Jeecgboot Feign、分布式压测、分布式任务调度_客户端_19

  • 代理invoke的实际执行过程

Jeecgboot Feign、分布式压测、分布式任务调度_docker_20

xxl-job定时任务集成

引入依赖

Jeecgboot Feign、分布式压测、分布式任务调度_客户端_21

客户端demo编写

Jeecgboot Feign、分布式压测、分布式任务调度_压测_22

修改 jeecg-dev.yaml 配置文件

  • 开启 xxljob 并 修改 xxljob-admin的服务连接配置

Jeecgboot Feign、分布式压测、分布式任务调度_客户端_23

  • 启动xxl-job服务

​数据库脚本​

https://gitee.com/pingfanrenbiji/jeecg-boot/blob/1e3a4d6a6f53589a3cd53fd18c62bf4375467447/jeecg-boot/jeecg-cloud-module/jeecg-cloud-xxljob/doc/db/tables_xxl_job.sql

​配置邮箱通知​

Jeecgboot Feign、分布式压测、分布式任务调度_客户端_24

​开启邮箱服务并生成授权码​

Jeecgboot Feign、分布式压测、分布式任务调度_docker_25Jeecgboot Feign、分布式压测、分布式任务调度_压测_26

​设置IMAP服务的SSL加密方式​

https://service.mail.qq.com/cgi-bin/help?subtype=1&&id=28&&no=331

Jeecgboot Feign、分布式压测、分布式任务调度_压测_27

​启动服务​

Jeecgboot Feign、分布式压测、分布式任务调度_压测_28

​界面访问​

http://localhost:9080/xxl-job-admin
admin
123456

Jeecgboot Feign、分布式压测、分布式任务调度_压测_29

  • 创建定时任务

​新增执行器​

Jeecgboot Feign、分布式压测、分布式任务调度_客户端_30

​新增定时任务​

Jeecgboot Feign、分布式压测、分布式任务调度_压测_31

​测试定时任务​

Jeecgboot Feign、分布式压测、分布式任务调度_客户端_32

​查看执行日志​

Jeecgboot Feign、分布式压测、分布式任务调度_docker_33Jeecgboot Feign、分布式压测、分布式任务调度_docker_34


举报

相关推荐

0 条评论