RDMA/RoCE Transporte de baja latencia y avance en el rendimiento del servidor
April 29, 2026
Un laboratorio de investigación de IA de rápido crecimiento estaba luchando con un problema familiar: su infraestructura de 100GbE ofrecía ancho de banda de velocidad de cable, pero la latencia de la aplicación seguía siendo obstinadamente alta.Los puestos de trabajo de formación distribuidos sufren frecuentes perturbaciones de la red, y el acceso de almacenamiento NVMe-over-Fabrics añadió retrasos impredecibles.dejando menos computación para cargas de trabajo realesEl equipo necesitaba un cambio fundamental para mover los datos sin sobrecargar la CPU.Mellanox (NVIDIA Mellanox) MCX653105A-HDAT también conocido comoNIC del servidor.
El laboratorio desplegó elEl valor de las emisiones de gases de efecto invernadero es el valor de las emisiones de gases de efecto invernadero.En el caso de los sistemas de conectividad de dos puertos, cada uno de ellos está equipado con una conectividad de dos puertos de 100 GbE.MCX653105A-HDAT Adaptador ConnectX tarjeta de red PCIe, es compatible con hardware-offloaded RoCE (RDMA over Converged Ethernet), lo que permite que los datos pasen por alto el núcleo y se muevan directamente entre regiones de memoria.después de comprobarCompatible con MCX653105A-HDATEn el caso de los servidores (Supermicro y Dell PowerEdge), los ingenieros instalaron los últimos controladores MLNX_OFED y habilitaron RoCE con control de congestión DCQCN.Tarjeta de adaptador Ethernet MCX653105A-HDATDescargaron inmediatamente el procesamiento de red de la CPU, reduciendo el software a casi cero.
Para el tráfico de almacenamiento, el equipo mapeó NVMe namespaces directamente sobre RDMA.NVIDIA Mellanox MCX653105A-HDAT, también conocido como NVIDIAEl sistema de control basado en hardware garantizaba el aislamiento entre los flujos de computación y almacenamiento.Si el vehículo no está equipado con un dispositivo de control de velocidad, se aplicará el procedimiento siguiente:, el adaptador admite hasta 200Gb/s de rendimiento agregado y, en la práctica, el laboratorio logró una velocidad de línea de 100GbE por puerto sin que se descargara un solo paquete bajo carga completa.
- Reducción del 50% de la latencia de extremo a extremo:Las pruebas de ping-pong MPI cayeron de 2.8 μs (TCP) a 1.4 μs (RoCE).
- Utilización de la CPU reducida en un 70%:El procesamiento de pila de red se trasladó completamente al hardware, liberando núcleos para el entrenamiento de modelos.
- El almacenamiento de IOPS se ha duplicado:NVMe-oF sobre RDMA eliminó el puente de software, empujando la latencia por debajo de 10 μs para los accesos de pequeños bloques.
El equipo también validóLas especificaciones MCX653105A-HDATEn cuanto a la planificación de la capacidad, se revisaron los resultados de la investigación y se evaluaron los avances realizados en la aplicación de las nuevas tecnologías.Precio de MCX653105A-HDATEn comparación con el coste total de propiedad, el adaptador se pagó en tres meses al reducir la dispersión de los servidores y mejorar la densidad de carga de trabajo.MCX653105A-HDAT para la ventaA través de distribuidores autorizados, encontraron múltiples opciones de configuración (un puerto, dos puertos, con o sin arranque seguro).
| El método métrico | Antes (TCP) | Después de (MCX653105A-HDAT / RoCE) | Mejora |
|---|---|---|---|
| La latencia del ping-pong de MPI | 2.8 μs | 1.4 μs | - El 50% |
| Uso de la CPU (estaca de red) | ~ 30% (8 núcleos) | ~ 5% (hardware descargado) | - El 83% |
| Las operaciones de transferencia de datos de los bancos centrales de los Estados miembros | 320 mil. | 680k | +12% |
Este despliegue confirma que elNVIDIA Mellanox MCX653105A-HDAT, también conocido como NVIDIAEs más que una NIC de alta velocidad, es una plataforma completa de aceleración de datos.Las organizaciones pueden liberarse de la red de CPU sin actualizaciones de montacargasYa sea que esté ejecutando capacitación de IA, bases de datos distribuidas o almacenamiento hiperconvergente, elMCX653105A-HDAT Adaptador ConnectX tarjeta de red PCIePara los equipos que planifican su próxima actualización de infraestructura, revisar elSi el vehículo no está equipado con un dispositivo de control de velocidad, se aplicará el procedimiento siguiente:yLas especificaciones MCX653105A-HDATEs el primer paso lógico.MCX653105A-HDAT para la ventaEl proceso de migración se desarrolla a través de distribuidores globales, y la compatibilidad con las principales plataformas de servidores garantiza una migración fluida.Tarjeta de adaptador Ethernet MCX653105A-HDATtransformó nuestro tejido 100GbE de un cuello de botella en un multiplicador de rendimiento".