本文来自“专用数据处理器（DPU）性能基准评测方法与实现（2022）”介绍 DPU 性能测试系统框架与测试流程，包括测试系统、测试要求、测试活动三部分。具体的，测试系统定义了三种搭建 DPU 测试系统的方法，测试要求阐述了组建 DPU 测试系统时需要满足的要求，测试活动定义了DPU Benchmark 的选择策略、执行前准备、执行过程及测试结果报告。
DPU 测试系统（System Under Test，SUT）是测试 DPU 性能的平台，其结构在不同应用场景中，主要分为三类：单端型测试系统（Single-End）、端到端型测试系统（End-to-End）和多端型测试系统（Multi-End）。
单端型（Single-End）测试系统是主机与 DPU 通过总线互联构成的封闭测试系统，主要用于模拟无网络连接情况下，DPU 作为专用加速器执行主机端特定业务的过程。在这种系统中，计算与数据传输仅在主机与 DPU 之间进行，DPU 不与其他设备通信，仅执行特定计算业务。单端型测试系统主要测试 DPU 对特定计算任务的性能提升。
端到端型（End-to-End）测试系统将两个单端型测试系统通过简单网络相连（网线直连），其中一个为请求发起者（Initiator/Client），另一个为请求接受者（Target/Server）。
端到端型测试系统主要模拟 DPU 作为网络加速器执行双端操作的场景。在这种系统中，计算与数据传输不仅在主机与 DPU 之间进行，还通过网络传输到其他系统。DPU 在Server 端接收主机端发起的网络请求并通过网口转发，或者在 Client 端接收网络的请求并向作出响应。端到端型测试系统能够屏蔽网络性能（转发次数、交换设备的性能、转发设备的性能）对 DPU 性能的影响，主要测试 DPU 对网络协议卸载、网络数据包处理的峰值能力。
多端型（Multi-End）测试系统是多个单端型测试系统通过复杂的网络拓扑相连的开放测试系统。该测试系统主要模拟 DPU 作为网络加速器在复杂环境中处理网络任务的场景。在这种系统中，网络环境（网络拓扑）与资源分布（相同或者不同类型的 DPU 系统）情况复杂，DPU 不仅承担一对一的网络任务，还可能接收一/多个其他系统的请求（含背景流量甚至恶意攻击）或响应一/多个其他系统的请求。
主机与 DPU 通过总线（通常为 PCIe）直接相连形成的可独立工作的系统为单端型测试系统，系统包含支持 DPU 正常工作的软件和硬件。在这种测试系统中，DPU 作为专用加速器执行特点计算业务。
单端型测试系统模型的基本结构如图2.1(a) 所示。运行时环境（Run Time Environ-ment，RTE）代表运行中的 DPU 测试程序，交换设备（Switch）为 DPU 与主机系统（Host System）的互连结构（通常为 PCIe）。在单端型测试系统中，DPU 作为专用加速器，主机使用 DPU 加速某些任务的处理，如数据库查询、AI 训练等。任务数据首先从主机端搬运到 DPU，DPU 计算完成后，再将处理完的数据写回主机。在这种工作模式中，DPU测试程序可以以数据处理时间、数据处理规模作为性能指标。
保证系统正常进行的硬件（内存、硬盘等），软件主要有操作系统、DPU 驱动、开源工具、DPU Benchmark，结构示意如图。各部分组件要求如下：
端到端型测试系统是由两个单端型测试系统通过网线直连的方式组成的测试系统。在这种测试系统中，屏蔽了复杂的网络拓扑与其他系统流量的影响，可以测试 DPU 网络加速的峰值性能。
端到端型测试系统由两个单端型测试模型直接相连（如图所示），每个单端测试系统分别运行 DPU Benchmark 测试程序，一般其中一个运行发起者程序 (Initiator/-Client)，另一个运行接收者程序 (Target/Server)。通过发起者发送请求，接收者响应请求，测量基于网络的端到端操作，例如 RDMA Send/Receive 操作，NVMe-oF 远程访问。在这种测试模型中，根据从一端 DPU 系统到另一端 DPU 系统的请求时间和流量等测试DPU 的延迟、吞吐量等性能。
端对端型测试系统在单端型测试系统的基础上，增加网络基础设备（通常为网线）
多端型测试系统是由多个单端型测试系统经由复杂网络（复杂的网络拓扑）连接形
成的测试系统。在这种测试系统中，可以模拟 DPU 所处的真实网络环境，测试 DPU 网络处理的实际性能。
多端型测试系统模型主要用于模拟基于 DPU 构建的数据中心，通过复杂的网络将
众多 DPU 系统 (功能相同或者不同) 互连起来，从而测试基于 DPU 系统实现的网络、存储或安全加速应用的真实性能，如NVMe-oF 读取不同结点存储系统的存储资源、RDMA访问不同结点的资源。在这种测试模型中，根据请求与响应时间、请求的数据量及并发的请求数等可以测试延时、吞吐量、连接能力等指标。
多端型测试系统在单端型测试系统的基础上，需要增加更复杂的网络基础设备用于连接不同节点的 DPU 系统。这些网络基础设施包括但不限于集线器、交换机、路由器等。
在 DPU Benchmark 执行时，为了保证测试结果的准确性与可重复性，对于同一种测试用例执行两轮（特殊的情况在具体的测试用例说明）。每一轮分为三个部分：预热 (Warmup Run) 部分排除初始化干扰；负载执行 (Measured Run) 部分为真正的指标测试；结果检查 (Result Check) 部分检查结果的正确性 (数据传输的完整性，计算结果的正确性等)。每执行完一轮需要恢复至初始状态 (Clear up)。在预热部分与负载执行之间不允许执行其他任务。每一轮执行的过程中，DPU 测试系统配置不可以发生变化。
在 DPU Benchmark 执行过程中，DPU 测试系统不可以重启或者重新开始。如果 DPU系统测试应用、操作系统或者硬件发生不可恢复的错误时，这一轮的执行应作无效；如果 DPU 系统测试应用、操作系统或者硬件检测到可恢复的错误，并且错误纠正并恢复正常，那么这一轮的执行应作有效。在错误发生处理期间，测试者不能人工干预，否则，这一轮执行应作无效。
测试报告中除了给出不同测试用例的性能指标，还需要给出测试过程中的全部配置信息，包括：配置参数，包括服务器、存储、网络等其他硬件设施；安装的操作系统、文件系统、测试工具等软件版本；在测试过程中使用到的其他软件程序；程序编译优化选项。在执行 DPU Benchmark 时如果系统发送异常或者其他情况，需要在报告附录中指出。
本文来自“专用数据处理器（DPU）性能基准评测方法与实现（2022）”介绍 DPU性能测试系统框架与测试流程，包括测试系统、测试要求、测试活动三部分。完整内容请参看原报告。
专用数据处理器 (DPU)技术白皮书
2021中国DPU行业发展白皮书
DPU在数据中心和边缘云上的应用
英伟达DPU集数据中心于芯片
2021中国DPU行业发展白皮书
CCIX缓存一致性互联技术概述
ARM CPU处理器资料汇总（1）
ARM CPU处理器资料汇总（2）
ARM系列处理器应用技术完全手册
本号资料全部上传至知识星球，更多内容请登录智能计算芯知识（知识星球）星球下载全部资料。
免责申明：本号聚焦相关技术分享，内容观点不代表本号立场，可追溯内容均注明来源，发布文章若存在版权等问题，请留言联系删除，谢谢。
电子书<服务器基础知识全解(终极版)>更新完毕。
获取方式：点击“阅读原文”即可查看182页 PPT可编辑版本和PDF阅读版本详情。
温馨提示：
请搜索“AI_Architect”或“扫码”关注公众号实时掌握深度技术分享，点击“阅读原文”获取更多原创技术干货。
