• 优点

  • 性能强大

  • 统计信息详细

  • 使用场景丰富

• 性能

  • HTTP 每秒新建连接数

  • HTTP 吞吐

  • HTTP 并发连接数

  • UDP TX PPS

• 测试环境配置

• 统计数据

• 开始使用

  • 设置大页

  • 编译 DPDK

  • 编译 dperf

  • 绑定网卡

  • 启动 dperf server

  • 从客户端发送请求

  • 运行测试

  • 开源地址

---

dperf 是一款基于 DPDK 的 100Gbps 网络性能和负载测试软件，能够每秒建立千万级的 HTTP 连接、亿级别的并发请求和数百 Gbps 的吞吐量。

优点

性能强大：

• 基于 DPDK，使用一台普通 x86 服务器就可以产生巨大的流量：千万级的 HTTP 每秒新建连接数，数百 Gbps 的带宽，几十亿的并发连接数

统计信息详细：

• 能够输出详细的统计信息，并且识别每一个丢包

使用场景丰富：

• 可用于对四层负载均衡等四层网关进行性能压力测试、长稳测试

• 可用于对云上虚拟机的网络性能进行测试

• 可用于对网卡性能、CPU 的网络报文处理能力进行测试

• 压测场景下，可作为高性能的 HTTP Server 或 HTTP Client 单独使用

性能

HTTP 每秒新建连接数

Client Cores	Server Cores	HTTP CPS
1	1	2,101,044
2	2	4,000,423
4	4	7,010,743
6	6	10,027,172

HTTP 吞吐

Client Cores	Server Cores	RX(Gbps)	TX(Gbps)	Client CPU Usage(%)	Server CPU Usage(%)
1	1	18	18	60	59
2	2	35	35	60	59
4	4	46	46	43	43

HTTP 并发连接数

Client Cores	Server Cores	Current Connections	Client CPU Usage(%)	Server CPU Usage(%)
1	1	100,000,000	34	39
2	2	200,000,000	36	39
4	4	400,000,000	40	41

UDP TX PPS

Client Cores	TX MPPS	Client CPU Usage(%)
1	15.96	95
2	29.95	95
4	34.92	67
6	35.92	54
8	37.12	22

测试环境配置

dperf 的以上性能数据，基于下面的配置测试得到：

• 内存: 512GB(大页 100GB)

• 网卡: Mellanox MT27710 25Gbps * 2

• 内核: 4.19.90

统计数据

dperf 每秒输出多种统计数据：

• TPS, CPS, 各种维度的 PPS

• TCP/Socket/HTTP 级别的错误数

• 丢包数

• 按照 TCP Flag 分类的报文重传数

seconds 22                 cpuUsage 52  
pktRx   3,001,058          pktTx    3,001,025          bitsRx   2,272,799,040      bitsTx  1,920,657,600      dropTx  0  
arpRx   0                  arpTx    0                  icmpRx   0                  icmpTx  0                  otherRx 0          badRx 0  
synRx   1,000,345          synTx    1,000,330          finRx    1,000,350          finTx   1,000,350          rstRx   0          rstTx 0  
synRt   0                  finRt    0                  ackRt    0                  pushRt  0                  tcpDrop 0  
skOpen  1,000,330          skClose  1,000,363          skCon    230                skErr   0  
httpGet 1,000,345          http2XX  1,000,350          httpErr  0  
ierrors 0                  oerrors  0                  imissed  0

开始使用

设置大页

#参考如下参数编辑 '/boot/grub2/grub.cfg'，然后重启OS  
linux16 /vmlinuz-... nopku transparent_hugepage=never default_hugepagesz=1G hugepagesz=1G hugepages=8

编译 DPDK

#编辑'config/common_base'打开PMD开关  
#Mellanox CX4/CX5 requires 'CONFIG_RTE_LIBRTE_MLX5_PMD=y'  
#HNS3 requires 'CONFIG_RTE_LIBRTE_HNS3_PMD=y'  
#VMXNET3 requires 'CONFIG_RTE_LIBRTE_VMXNET3_PMD=y'  
  
TARGET=x86_64-native-linuxapp-gcc #or arm64-armv8a-linuxapp-gcc  
cd /root/dpdk/dpdk-stable-19.11.10  
make install T=$TARGET -j16

编译 dperf

cd dperf  
make -j8 RTE_SDK=/root/dpdk/dpdk-stable-19.11.10 RTE_TARGET=$TARGET

绑定网卡

#Mellanox网卡跳过此步  
#假设PCI号是0000:1b:00.0  
  
modprobe uio  
modprobe uio_pci_generic  
/root/dpdk/dpdk-stable-19.11.10/usertools/dpdk-devbind.py -b uio_pci_generic 0000:1b:00.0

启动 dperf server

#dperf server监听6.6.241.27:80, 网关是6.6.241.1  
./build/dperf -c test/http/server-cps.conf

从客户端发送请求

#客户端IP必须要在配置文件的'client'范围内  
ping 6.6.241.27  
curl http://6.6.241.27/

运行测试

下面的例子运行一个 HTTP CPS 压力测试。在 server 端运行 dperf ./build/dperf -c test/http/server-cps.conf

#以另一台机器作为client端，运行dperf  
./build/dperf -c test/http/client-cps.conf

开源地址

• https://github.com/baidu/dperf

推荐阅读：

被 GPT-4 Plus 账号价格劝退了！

世界的真实格局分析，地球人类社会底层运行原理

不是你需要中台，而是一名合格的架构师（附各大厂中台建设PPT）

企业IT技术架构规划方案

论数字化转型——转什么，如何转？

华为干部与人才发展手册（附PPT）

【中台实践】华为大数据中台架构分享.pdf

华为的数字化转型方法论

华为如何实施数字化转型（附PPT）

华为大数据解决方案（PPT）