狂收 3.2k star!百度开源压测工具,可模拟几十亿的并发场景,太强悍了! ...

打印 上一主题 下一主题

主题 754|帖子 754|积分 2262

dperf 是一款基于 DPDK 的 100Gbps 网络性能和负载测试软件,能够每秒建立千万级的 HTTP 连接、亿级别的并发请求和数百 Gbps 的吞吐量。
优点

性能强大:


  • 基于 DPDK,使用一台普通 x86 服务器就可以产生巨大的流量:千万级的 HTTP 每秒新建连接数,数百 Gbps 的带宽,几十亿的并发连接数
统计信息详细:


  • 能够输出详细的统计信息,并且识别每一个丢包
使用场景丰富:


  • 可用于对四层负载均衡等四层网关进行性能压力测试、长稳测试
  • 可用于对云上虚拟机的网络性能进行测试
  • 可用于对网卡性能、CPU 的网络报文处理能力进行测试
  • 压测场景下,可作为高性能的 HTTP Server 或 HTTP Client 单独使用
性能

HTTP 每秒新建连接数

Client CoresServer CoresHTTP CPS112,101,044224,000,423447,010,7436610,027,172HTTP 吞吐

Client CoresServer CoresRX(Gbps)TX(Gbps)Client CPU Usage(%)Server CPU Usage(%)111818605922353560594446464343HTTP 并发连接数

Client CoresServer CoresCurrent ConnectionsClient CPU Usage(%)Server CPU Usage(%)11100,000,000343922200,000,000363944400,000,0004041UDP TX PPS

Client CoresTX MPPSClient CPU Usage(%)115.9695229.9595434.9267635.9254837.1222测试环境配置

dperf 的以上性能数据,基于下面的配置测试得到:

  • 内存: 512GB(大页 100GB)
  • 网卡: Mellanox MT27710 25Gbps * 2
  • 内核: 4.19.90
统计数据

dperf 每秒输出多种统计数据:

  • TPS, CPS, 各种维度的 PPS
  • TCP/Socket/HTTP 级别的错误数
  • 丢包数
  • 按照 TCP Flag 分类的报文重传数
  1. seconds 22                 cpuUsage 52  
  2. pktRx   3,001,058          pktTx    3,001,025          bitsRx   2,272,799,040      bitsTx  1,920,657,600      dropTx  0  
  3. arpRx   0                  arpTx    0                  icmpRx   0                  icmpTx  0                  otherRx 0          badRx 0  
  4. synRx   1,000,345          synTx    1,000,330          finRx    1,000,350          finTx   1,000,350          rstRx   0          rstTx 0  
  5. synRt   0                  finRt    0                  ackRt    0                  pushRt  0                  tcpDrop 0  
  6. skOpen  1,000,330          skClose  1,000,363          skCon    230                skErr   0  
  7. httpGet 1,000,345          http2XX  1,000,350          httpErr  0  
  8. ierrors 0                  oerrors  0                  imissed  0  
复制代码
开始使用

设置大页
  1. #参考如下参数编辑 '/boot/grub2/grub.cfg',然后重启OS  
  2. linux16 /vmlinuz-... nopku transparent_hugepage=never default_hugepagesz=1G hugepagesz=1G hugepages=8  
复制代码
编译 DPDK
  1. #编辑'config/common_base'打开PMD开关  
  2. #Mellanox CX4/CX5 requires 'CONFIG_RTE_LIBRTE_MLX5_PMD=y'  
  3. #HNS3 requires 'CONFIG_RTE_LIBRTE_HNS3_PMD=y'  
  4. #VMXNET3 requires 'CONFIG_RTE_LIBRTE_VMXNET3_PMD=y'  
  5.   
  6. TARGET=x86_64-native-linuxapp-gcc #or arm64-armv8a-linuxapp-gcc  
  7. cd /root/dpdk/dpdk-stable-19.11.10  
  8. make install T=$TARGET -j16  
复制代码
编译 dperf
  1. cd dperf  
  2. make -j8 RTE_SDK=/root/dpdk/dpdk-stable-19.11.10 RTE_TARGET=$TARGET  
复制代码
绑定网卡
  1. #Mellanox网卡跳过此步  
  2. #假设PCI号是0000:1b:00.0  
  3.   
  4. modprobe uio  
  5. modprobe uio_pci_generic  
  6. /root/dpdk/dpdk-stable-19.11.10/usertools/dpdk-devbind.py -b uio_pci_generic 0000:1b:00.0  
复制代码
启动 dperf server
  1. #dperf server监听6.6.241.27:80, 网关是6.6.241.1  
  2. ./build/dperf -c test/http/server-cps.conf  
复制代码
从客户端发送请求
  1. #客户端IP必须要在配置文件的'client'范围内  
  2. ping 6.6.241.27  
  3. curl http://6.6.241.27/  
复制代码
运行测试

下面的例子运行一个 HTTP CPS 压力测试。在 server 端运行 dperf ./build/dperf -c test/http/server-cps.conf
  1. #以另一台机器作为client端,运行dperf  
  2. ./build/dperf -c test/http/client-cps.conf  
复制代码
开源地址:https://github.com/baidu/dperf
近期热文推荐:
1.1,000+ 道 Java面试题及答案整理(2022最新版)
2.劲爆!Java 协程要来了。。。
3.Spring Boot 2.x 教程,太全了!
4.别再写满屏的爆爆爆炸类了,试试装饰器模式,这才是优雅的方式!!
5.《Java开发手册(嵩山版)》最新发布,速速下载!
觉得不错,别忘了随手点赞+转发哦!

免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!
回复

使用道具 举报

0 个回复

正序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

魏晓东

金牌会员
这个人很懒什么都没写!

标签云

快速回复 返回顶部 返回列表