...

如何使用iperf3测试10Gbps专用服务器

测试 10Gbps 专用服务器横幅

要使用 iPerf3 测试 10Gbps 专用服务器,请将其连接到第二个功能强大的主机并测量两个方向的 TCP 吞吐量。 将一流与四个并行流进行比较,然后使用测试条件保存结果。 这显示了所选端点和网络路径在测试期间可以承载多少流量。

仅端口速度无法告诉您备份、下载或复制作业的运行速度。 本指南介绍如何设置受控 Linux 测试、读取输出、检查意外结果以及之后关闭临时侦听器。

10Gbps测试计划一目了然

一个有用的 10Gbps 网络带宽测试比较了四种情况:一种传出流、一种传入流、四种传出流和四种传入流。 保持端点和设置固定,以便结果具有可比性。

  1. 准备两个有能力的主机并记录它们的起始状态。
  2. 启动一个监听器,访问限制为测试源。
  3. 在每个方向测量 1 个 TCP 流。
  4. 使用可选的 UDP 或全双工测试比较并行流。
  5. 读取 CPU 和网络计数器旁边的接收器结果。
  6. 保存报告并检查任何错过目标的结果。
  7. 停止侦听器并删除临时访问规则。

使用此矩阵作为基线:

测试 交通方向 TCP 流 初始持续时间 问题回答
t1 专用服务器对端 1 30秒 一种流出流量有多快?
t2 对等到专用服务器 1 30秒 一种流入流量有多快?
t3 专用服务器对端 4 30秒 几个流量可以承载多少流出流量?
t4 对等到专用服务器 4 30秒 几个流量可以承载多少流入流量?

30 秒和 4 个流是此过程的开始选择,而不是通用通过标准。 以下命令是基于文档的示例。 本指南中没有数字代表已完成的 Atal Networks 硬件基准。

iPerf3 测量的是什么,以及它遗漏了什么

iperf3 测量客户端和侦听服务器之间的流量。 正常测试在内存中生成数据,这有助于将网络传输性能与磁盘读写分开。 文件副本添加了此测试不会复制的存储和应用程序工作。 

将三个术语分开:

  • 链接率: 报告的网络接口容量,例如 10Gbps。
  • 吞吐量: 在规定的测试中实现的转移率。
  • 转移量: 移动的数据量,例如 50GB。

物理10Gbps网口也不同于TCP或UDP端口5201。 编号的传输端口将流量定向到测试应用程序。

选择一条回答您问题的路径

附近的对等点有助于建立具有较少 Internet 路径变量的基线。 远处的同伴有助于衡量到达该目的地的交付。 两个测试都没有隔离主机之间的每个组件。

测试路径 有用 主要限制
附近网络上有两位有能力的主机 初始吞吐量基线 不建立远程互联网性能
不同地区的两台主机 区域转移规划 包括端点和更宽的路线
公共测试端点 额外的路径比较 容量和电流负载可能未知
在一台主机上环回 本地软件检查 不测试物理 NIC 或上行链路

不要用 127.0.0.1 测量专用服务器的外部连接。 回送流量停留在主机上。

第 1 步:在生成流量之前准备好两个主机

使用两台具有足够的备用 CPU 和网络容量的授权主机来衡量您要测量的速率。 即使专用服务器具有备用容量,慢速对等体也可能限制结果。

该指南使用一致的角色:

  • 服务器A: 正在测试的专用服务器。 在此处运行所有客户端命令。
  • 服务器 B: 同行。 在这里运行监听器。
  • A到B: 离开专用服务器的流量。
  • B到A: 进入专用服务器的流量。

如果 B 是 VM,请检查其来宾带宽和 CPU 分配。 主机的 10Gbps 上行链路无法确定一位客人可以使用多少容量。

安装 iperf3 并记录版本

在 Debian 或 Ubuntu 上,在两台主机上安装软件包:

sudo apt update

sudo apt install iperf3

在其启用的存储库中提供包的基于 RPM 的分发中:

sudo dnf install iperf3

在每个主机上记录安装的版本:

iperf3 --version

iperf3 3.16 及更高版本对每个测试流使用单独的线程。 较旧的版本处理流的方式不同,因此在比较结果之前记录两个版本。 iperf2 和 iperf3 是同一测试的不兼容端点。 

如果 Installation 提供启动永久服务器,请拒绝此临时程序。 保留其他用户需要的任何现有服务配置。

检查接口和启动负载

在 A 上,确定通往 B 的路线:

ip route get LISTENER_IP

更换 侦听器_ip 具有 B 的可达 IPv4 地址。 更换 介面 下面是该路由查找显示的接口:

ip -s link show dev INTERFACE

ethtool INTERFACE

ethtool -i INTERFACE

还要检查 B 的接口。 记录报告的速度、MTU、驱动程序和计数器值。 一些虚拟接口不公开物理链接信息,有些查询需要提升的权限。

一个报道 10000MB/s 当司机正确报告时,仅确认本地链接速率。 它不会在整个路线上建立吞吐量。

整个测试的预算,而不是一项命令

持续 30 秒的 10Gbps 速率相当于 37.5GB,然后计算有效载荷和计费的计量方式:

10,000,000,000 位/秒 × 30 秒 ÷ 8 = 37,500,000,000 字节

测试计划 10Gbps的原始速率-时间体积
1个30秒的单程跑步 37.5GB
四个基线运行,单独执行 150GB
所有四个基线运行的三个重复 450GB

这些计算假设每次运行维持 10Gbps。 实际有用的有效负载可以更低。 重新传输、框架、预热流量和计费规则会影响其他流量总数。 可选测试增加了更多流量。

选择一个约定的测试窗口。 全速率测试可以消耗实时应用程序所需的容量。

第 2 步:启动受限访问的侦听器

在 B 上启动侦听器,并通过活动防火墙仅允许预期的来源。 在测试时保持现有的安全控制。

对于现有的 UFW 管理的防火墙,请检查其当前策略:

sudo ufw status verbose

如果 UFW 处于活动状态,则示例源特定的 TCP 规则为:

sudo ufw allow proto tcp from CLIENT_IP to LISTENER_IP port 5201

更换 客户端 IP 与 B 的源地址一样,B 看到它。 NAT 可以更改该地址。 更换 侦听器_ip 使用 B 的本地收听地址。 UFW 支持其规则中的源、目标、协议和端口条件。 

狭窄的允许规则不会取消现有的广泛允许规则。 检查完整的策略、提供程序防火墙和任何网络访问控制。 使用您当前的防火墙管理器,而不是为此测试启用第二个。

在 B 上,启动侦听器:

 

iperf3 -s -B LISTENER_IP

 

让该终端打开。 默认应用程序端口为 TCP 5201。 

以有限的速率检查连接

在 A 上,在尝试完整吞吐量之前运行一个简短的检查:

iperf3 -c LISTENER_IP -P 1 -b 100M -t 10

这要求 100Mbps TCP 速率,持续 10 秒。 如果该负载会影响其他流量,则使用较低的目标。

预期结果: 连接打开,数据传输,运行完成。 这检查设置; 它没有建立 10Gbps 的容量。

设置问题 第一次检查
连接被拒绝 侦听器进程、地址、端口和拒绝规则
连接超时 可达性、路由、过滤和实际源地址
地址已在使用 所选地址和端口上的现有服务
服务器忙 另一个积极的测试; 重试之前的坐标
无法绑定地址 请求的本地地址是否属于 B

在解释性能之前解决设置错误。

步骤 3:测量两个方向的单个 TCP 流

从 A 到 B 运行一个流,然后从同一客户端反向数据方向。 这些测试确定一种流在发送或接收时的行为是否不同。

在 A 上创建一个结果目录。为每个测试会话选择一个新的目录名称:

mkdir -p iperf-results-session-01

 

运行前向测试:

iperf3 -c LISTENER_IP -P 1 -t 30 | tee iperf-results-session-01/t1-forward-one.txt

 

第一个完成后运行反向测试:

iperf3 -c LISTENER_IP -P 1 -t 30 -R | tee iperf-results-session-01/t2-reverse-one.txt

 

命令显示输出并保存。 替换具有相同名称的现有文件,因此使用新名称进行重复运行。 在接受其输出之前,检查每个测试是否成功完成。

这些基线命令没有明确的速率上限。 仅在商定的容量和交通预算范围内运行它们。

保持方向标签清晰

反向模式 更改数据方向,而不是主机启动测试。 A 启动两个命令。 在 T1 中,A 发送; 在 T2 中,A 接收。 

在报告中写“A到B”和“B到A”。 当操作员在主机之间切换时,上传和下载等标签变得混乱。

在第一个基线中包含启动

第一个基线包括启动行为。 如果您稍后使用省略的预热时间来研究稳态性能,请记录该选择并将其仅与匹配的运行进行比较。

短期转移和长期转移回答不同的运营问题。 备份可能需要持续的吞吐量,而在长测试达到稳定状态之前,可能会完成少量下载。

第 4 步:比较并行流和可选的 UDP 测试

将四个 TCP 流与单流基线进行比较,以了解端点和路径如何处理多个流。 将全双工和 UDP 测试分开,因为它们会改变工作负载。

在 A 上,在每个方向上运行四个流:

 

iperf3 -c LISTENER_IP -P 4 -t 30 | tee iperf-results-session-01/t3-forward-four.txt

iperf3 -c LISTENER_IP -P 4 -t 30 -R | tee iperf-results-session-01/t4-reverse-four.txt

 

让第一个命令在第二个开始之前完成。 更高的总汇率并不意味着每个单独的连接都可以达到该速率。

并行流可以在 CPU 和网络路径之间以不同的方式分配工作。 即使并行结果看起来更好,也要保持一流结果。

可选:一次测试两个方向

当应用程序同时大量发送和接收时,使用单独的双向运行:

iperf3 -c LISTENER_IP -P 1 -t 30 --bidir

检查两个版本的支持。 分别记录传入和传出费率。 将这两种速率相加不会产生单向吞吐量数据。

可选:测量 UDP 损失和抖动

UDP 测试有助于将所提供的流量与指定负载下的接收流量进行比较。 它适用于数据包传递和时间变化很重要的工作负载。

保持控制连接的 TCP 访问权限并允许 UDP 测试流量。 如果较早的 UFW 示例适用于 B:

sudo ufw allow proto udp from CLIENT_IP to LISTENER_IP port 5201

从 A 上的有界速率开始:

iperf3 -c LISTENER_IP -u -P 1 -b 100M -l 1200 -t 10

该示例使用 1,200 字节 UDP 有效负载请求 100Mbps。 确认 Payload Plus 标头适合路径 MTU,包括任何隧道开销。 仅在约定的预算内和审查端点负载后提高提供的费率。

将第一个 UDP 比较保持到一个流。 对于并行流,比特率目标应用于每个流。 记录请求的速率、实际发送者和接收者费率、有效载荷大小、丢失的数据报和抖动。 

请求的费率不能证明主机生成或交付了该费率。 抖动描述了时序变化; 它不会取代网站响应时间测试。

第 5 步:读取接收器速率并与主机负载

对接收到的吞吐量使用最终接收器摘要,然后检查间隔、重传和上下文的主机负载。 仅峰值间隔不能描述完成的运行。

场 它告诉你什么 阅读规则
间隔 行覆盖的时间 从短间隔中分开的整个运行结果
转让 在该间隔内计算的数据 检查显示的单元
比特率 间隔内的速率 不要只选择最高的行
发件人/接收者 端点透视 将角色与测试方向匹配
和 组合流 与另一个汇总结果进行比较
反向 可用的 TCP 重传 使用负载和计数器更改进行审查
CWnd 可用的拥塞窗口信息 对待 TCP 上下文,而不是链接容量

可用字段因协议、平台和构建而异。 保持完整的输出,而不是只复制最大的数字。

不要将发送方-接收者的差异视为损失公式

TCP 发送器和接收器摘要可能有所不同,因为它们的测量边界和飞行中的数据不同。 从另一种中减去一种速率不会计算数据包丢失。

重传也需要上下文。 没有传输持续时间、流量和路径条件的计数无法识别故障组件。

在运行期间检查两个主机

单个繁忙的 CPU 内核可以限制传输,而平均服务器 CPU 使用率看起来很低。 如果是 系统统计 安装了工具,在每个主机上的单独会话中运行它:

mpstat -p 全部 1 35

在同一运行之前和之后比较接口计数器:

ip -s link show dev INTERFACE

增加的下降计数器值得研究,但其含义取决于接口和驱动程序。 不要假设每一滴都是物理故障。

保持现有配置的第一个基线。 缓冲区、卸载或拥塞控制的更改属于与记录的起始值和恢复计划的单独比较。

第 6 步:确定结果是否符合您的要求

针对命名路径、方向、流数和工作负载的目标判断测试。 10Gbps 端口不会为所有 Internet 目标创建一个通用接受阈值。

10Gbps等于1,250MB/s,以小数为单位开销。 以太网、IP、传输头和其他处理减少了有用的有效负载。 MB/S 和 MIB/S 也使用不同的字节单位。

那个 10Gbps 与 1Gbps 专用服务器比较 说明容量差异。 对于此测试,在判断结果之前,就所需的接收率和允许的变化达成一致。

使用不隐藏变化的重复运行

如果交通预算允许,请重复每个基线案例 3 次。 报告每种情况的中位数和最小到最大范围。 三个重复是实际的第一次检查,而不是一天或一个月内表现的证据。

将不同的目的地、IP 族、流数目和方向保存在单独的行中。

 

测试 方向 溪流 中位接收率 最小-最大范围 CPU/计数器备注
t1 A 到 B 1 记录结果 记录范围 记录观察
t2 B到A 1 记录结果 记录范围 记录观察
t3 A 到 B 4 记录结果 记录范围 记录观察
t4 B到A 4 记录结果 记录范围 记录观察

使用表保留操作系统、内核、iPerf3 版本、CPU、NIC、驱动程序、链接速率、地址、位置、精确命令、时间戳和后台负载。

当您需要机器可读结果时保存JSON

为单独记录的运行添加JSON输出:

 

iperf3 -c LISTENER_IP -P 1 -t 30 -J > iperf-results-session-01/t1-forward-one-json-run.json

 

通常的 JSON 文档在测试结束时完成。 在摘要中使用它们之前查看错误和中断运行。 这个额外的命令会创建另一个传输,因此将其包含在交通预算中。

按照结果模式进行下一次检查

模式 接下来要检查什么
一流很慢; 四个更快 每核 CPU 使用、TCP 行为和流量分布
只有一个方向很慢 主机角色、方向策略和路由
附近很快; 远程是慢的 远程端点容量、延迟和路由
CPU 在低吞吐量期间达到极限 主机处理能力和工具版本
重传或下降随负载而上升 端点计数器、队列和可能的路径丢失
iperf3 很快; 文件副本很慢 存储、加密、应用程序设置和不同的流量策略

第二个授权端点可以帮助确定结果是否遵循一个对等体或路径。 一次更改一个变量。

例如,即使 B 很好地接收基于内存的测试流量,备份作业也可能需要在 B 处进行快速磁盘写入。 在确定服务达到其操作目标之前,重复实际的备份任务。

步骤 7:关闭侦听器并恢复临时规则

停止测试过程并仅删除为此过程添加的访问规则。 保留证据文件,以便未来的测试有一个基线。

在 B 上,按 CTRL+C 在侦听器终端中。 如果您创建了之前显示的 UFW 规则,请将其与其匹配的描述一起删除:

 

sudo ufw delete allow proto tcp from CLIENT_IP to LISTENER_IP port 5201

sudo ufw delete allow proto udp from CLIENT_IP to LISTENER_IP port 5201

 

仅在添加 UDP 规则时删除它。 不要删除预先存在的服务访问权限。 UFW 支持通过原始规则描述删除。 

检查剩余的 TCP 侦听器:

 

ss -ltnp 'sport = :5201'

 

如果测试是该端口上的唯一服务,则不会期望匹配行。 在停止之前确定任何剩余的过程。

在 systemd 主机上,检查 iperf3 服务是否存在:

 

systemctl status iperf3

 

缺少的单元可以是正常的。 仅当此测试创建了它并且没有其他工作需要它时才停止和禁用服务。 恢复在诊断期间更改的任何其他设置。

常见问题

一个 TCP 流可以填充 10Gbps 的连接吗?

当主机和路径支持时,一种TCP流可以实现高吞吐量。 CPU 处理、TCP 行为、延迟和丢失会影响结果。 将一个流与多个流进行比较,以查看单流限制是否对您的工作负载很重要。 不要仅仅因为聚合数较高而丢弃单流结果。

我需要第二个 10Gbps 专用服务器吗?

您需要一个能够衡量您想要衡量的速率的对等和路径。 对等体不需要相同的服务器模型,但它需要足够的可用网络和处理能力。 较慢的对等点可以衡量较低速率的性能; 它无法针对有能力的 10Gbps 端点建立第一台服务器的容量。

我可以使用公共 iperf3 服务器吗?

如果操作员允许测试,公共端点可以提供额外的比较。 首先检查使用规则、端口、速率限制和允许的持续时间。 其当前负载可能未知。 将结果视为该端点的性能,并在需要可重复接受检查时使用受控对等点。

iperf3 是否测量磁盘速度?

本指南中的普通命令生成基于内存的流量,不会再现磁盘读写。 文件副本增加了存储、文件系统和应用程序的工作。 使用 iperf3 建立网络基线,然后运行代表性文件传输来检查完成的任务。 在您的报告中分隔这些结果。

反向和双向测试有什么区别?

反向测试将来自侦听器的数据发送回客户端。 双向测试同时以两种方式发送数据。 客户端启动任一测试,但负载不同。 单独记录每个方向,并仅将双向结果与使用相同组合负载的其他运行进行比较。

为什么 UDP 测试也需要 TCP 访问?

iPerf3 使用 TCP 控制连接来协调 UDP 测试。 测试数据使用 UDP,因此这两条路径都需要通过相关防火墙进行所需的访问。 允许特定的测试源和目标,而不是广泛地打开侦听器,并在测试完成时删除临时访问权限。 

如何使用iperf3测试IPv6?

使用对等体的可达 IPv6 地址并选择 IPv6 -6 选项。 确认该路径上的侦听器绑定和 IPv6 防火墙访问权限。 将 IPv6 和 IPv4 结果分开,因为地址系列可能遵循不同的路由或策略。 记录每个测试结果旁边的家庭,以便以后的比较保持清晰。

我可以比较 Windows 和 Linux iperf3 结果吗?

仅在记录确切的构建和网络环境后进行比较。 ESNet 不支持本机 Windows iPerf3,第三方构建可能有所不同。 WSL 测试还包括虚拟网络层。 尽可能使用可比较的 Linux 端点作为基线,然后分别测量实际的客户端环境。 

推荐的下一步

保留四箱基线并用它来检查实际工作量。 如果备份、下载或复制作业仍未达到目标,请查看网络结果旁边的应用程序和存储行为。

对于无法解释的网络结果,发送支持原始日志、时间戳、端点详细信息、命令和主机观察。 一个具体的、可重复的测试为团队提供了一个有用的起点。

如果工作负载需要更多容量,请使用 10Gbps 服务器选择指南 查看硬件和网络要求。 然后比较 Atal Networks 10Gbps 专用服务器 并与我们的团队分享测量的需求。

滚动至顶部
Seraphinite AcceleratorBannerText_Seraphinite Accelerator
Turns on site high speed to be attractive for people and search engines.