技术探秘 如何利用仪表构造InfiniBand流量在数据中心测试中的应用

  在当今数据爆炸的时代，数据中心作为信息处理的中心枢纽，面临着前所未有的挑战。传统的通信方式已经难以满足日渐增长的数据传输需求，而InfiniBand技术的出现，为数据中心带来了全新的通信解决方案。

  InfiniBand（IB）是一种高性能计算和数据中心网络架构，其设计目标是通过提供低延迟、高带宽以及可扩展性来满足大规模计算和数据传输的需求。让我们深入了解InfiniBand的基本概念。

  InfiniBand网络采用点对点的直连架构。每个设备，如服务器、存储设备或其他计算资源，都通过InfiniBand适配器直接连接到网络，形成一个点对点的通信结构。这种设计有助于降低通信的延迟，提升整体性能。

  说到Infiniband网络，我们第一步提到传统网络数据传输的架构。在传统的互连结构中，操作系统通常是共享网络资源的唯一所有者，这导致应用程序没办法直接访问网络。相反，数据传输常常要依赖操作系统将数据从应用程序的虚拟缓冲区传输到网络堆栈和线路。在传统网络结构中，应用程序一定要通过操作系统来实现数据的传输。

  应用程序通过系统调用等方式请求操作系统将数据传输到网络堆栈中。·网络堆栈传输：

  操作系统将数据从应用程序缓冲区传输到网络堆栈，这中间还包括协议栈的处理，例如TCP/IP协议。·网络线路传输：

  最终，数据利用互联网线路传输到目标节点。这种结构下，应用程序没办法直接控制网络的数据传输，而是依赖于操作系统进行中介。InfiniBand技术的突出特点之一是以应用为中心的网络交互方式。这种方式下，应用程序能够直接利用互联网进行数据的交换，而无需直接涉及操作系统。

  InfiniBand网络支持远程直接内存访问（RDMA）技术。通过RDMA，应用程序能在不涉及操作系统的情况下直接访问和交换内存中的数据。这种直接的内存访问方式消除了传统网络结构中的中介步骤，大幅度的降低了数据传输的延迟。

  InfiniBand网络允许在用户空间中实现网络堆栈，使得应用程序能够直接处理网络协议。这样一来，应用程序不再一定要通过操作系统的内核空间进行数据传输，而可以直接在用户空间中完成网络操作，提高了效率和灵活性。

  InfiniBand还支持零拷贝技术，通过这一技术，应用程序能直接在内存中操纵数据，而无需将数据复制到中间缓冲区。这降低了数据传输的开销，提高了效率。

  InfiniBand架构与传统的TCP/IP模型在网络通信中有着显著的差异，尤其在分布式存储和高性能计算领域的应用上。InfiniBand架构分为五层，类似于传统的TCP/IP模型。这五层分别是：

  提供网络服务给应用程序，如TCP、UDP等。InfiniBand在分布式存储领域，尤其是在分布式并行计算场景的存储前端网络中得到普遍应用。其强调高性能、低延迟，适用于大规模并行计算机集群和需要高吞吐量的应用场景。

  TCP/IP则更为普遍地应用于商业网络和一般互联网通信。它是目前互联网通信的主流协议，用于支持各种应用，包括网页浏览、电子邮件、文件传输等。

  InfiniBand架构通过引入远程直接内存访问（RDMA）技术等创新，解决了网络传输过程中服务器端数据处理的延迟问题。RDMA技术允许利用互联网接口直接访问内存数据，无需内核干预，以此来实现高吞吐量和低延迟的网络通信。

  通过InfiniBand实现以应用为中心的网络交互方式，带来了一系列优势，并与传统网络结构形成了关键区别：

  由于应用程序能够直接进行数据交换，而无需经过多层的操作系统介入，因此InfiniBand网络实现了更低的传输延迟。这对于对延迟要求比较高的应用场景非常重要。

  InfiniBand的应用为中心方式能够更有效地利用网络资源，提高了整体的带宽利用率。这使得InfiniBand网络在大规模数据传输和高性能计算等方面表现出色。

  通过支持RDMA、用户空间网络堆栈和零拷贝技术，InfiniBand实现了更高效的数据传输方式。这种高效能直接影响到应用程序的性能和响应速度。

  以应用为中心的方式使得应用程序更灵活地控制数据传输和网络操作，无需过多依赖于操作系统的限制。这为应用程序提供了更大的自主性和定制性。

  [/color]信而泰L23测试平台Renix支持构造UDP报文头内的各种InfiniBand报文协议栈,通过构造Infinbind流量，模拟CA设备与被测设备之间进行请求（request）或者响应（response）消息的交互，以此来验证被测设备针对Infiniband协议字段的识别和处理能力。

  如图所示，测试仪P1与P2端口与DUT的A、B端口互联，通过在测试仪A端口构造Infiniband流量发送至A端口，应答消息由B端口发送至测试仪B端口，来模拟CA设备之间的消息交互场景。

  创建完成后可以在流模板帧界面能够正常的看到创建的该条流量是基于UDP的infiniband流量，并且每个字段都支持自定义编辑。

  被测设备收到测试仪发出的Infiniband消息后会解析其中的消息字段并做出响应，通过这一种方式可以测试执行send、recive、write、read、原子操作的场景。报文交互现象如下图所示：

  每个Infiniband报文分为payload、路由报文头（header）、CRC校验等，其中header包含以下内容：

  包括目标端口本地ID（DLID）和源端口本地ID（SLID）。两者都占据16-bits，前者用来表示报文通过交换机需要到达的子网目的地端口；后者用来表示报文源头的子网ID。

  包括目标端口全局ID（DGID）和源端口全局ID（SGID）。两者都占据128-bits，高64-bits表示CA端口的子网ID，低64-bits表示端口的全局唯一ID（GUID）。

  06.信而泰DarYu/BigTao系列网络测试仪DarYu-X系列高性能网络测试仪是信而泰推出的面向高端路由器、高端交换机、数据中心交换机以及高性能应用层设备的测试产品，具有高性能、高密度、高速率等特点，支持单框运行、多框级联等模式。它采用模块化设计，提供3个或12个插槽，测试接口覆盖以太网1G到400G范围内的所有速率，实现按需扩展，帮企业用户轻松应对测试业务的迅速增加和未来业务发展。

  BigTao-V系列网络测试仪可实现针对网络设备和网络系统的流量测试及协议仿真，在功能、性能及安全性方面提供全面测试解决方案，满足研发、实验和质量控制等过程中的测试需求。