NVIDIA Mellanox MCX631432AN-ADAB en acción: RDMA / RoCE Transporte de baja latencia y avances en el rendimiento del servidor

Antecedentes y desafío: El muro de escalabilidad de las pilas TCP/IP tradicionales

Un proveedor de nube de tamaño medio que ejecuta almacenamiento distribuido y análisis en tiempo real se enfrentó a un problema de escala familiar: su infraestructura de 10GbE, que se basa en TCP/IP tradicional,estaba ahogándose en CPU sobrecargaCada servidor con capacidad de 25GbE utilizaba más del 30% de sus núcleos sólo para manejar interrupciones de red y copias de datos.especialmente durante los estallidos de tráfico este-oeste a través de los grupos Redis y los backends de almacenamiento de CephEl equipo necesitaba una capa de acceso de baja latencia y alto rendimiento que pudiera preservar los recursos de la CPU para la lógica empresarial sin una actualización completa de toda su estructura de conmutación.

Solución y implementación: Adopción de RoCE con el MCX631432AN-ADAB

El proveedor seleccionó el迈络思 ((NVIDIA Mellanox) MCX631432AN-ADAB) ¿Qué es lo que quieres decir con esto?El sistema de adaptación de servidores es la piedra angular de la modernización de su red.MCX631432AN-ADAB ConnectX-6 Lx con doble puerto 25GbE SFP28El diseño permitió un enlace ascendente directo de 25GbE desde cada nodo de cómputo a los switches ToR existentes con capacidad de RoCE.seguido de los nodos de cómputo que alojan máquinas virtuales KVM y Spark analyticsEn la actualidad, elTarjeta de adaptador Ethernet MCX631432AN-ADABEl equipo utilizó el control automático de congestión de RoCE (DCQCN), eliminando la necesidad de ajustes complejos de PFC.Se aplicarán las siguientes medidas:para validar el ancho de banda PCIe 4.0 x8 y las capacidades de descarga de hardware antes de poner a prueba 50 nodos en producción.

Ganancias en el rendimiento: RDMA Transport & Throughput Elevation

Después de cambiar a laNVIDIA Mellanox MCX631432AN-ADAB, también conocido como NVIDIACon RoCE v2, los resultados fueron inmediatos. La latencia de almacenamiento para las escrituras aleatorias 4K disminuyó de 1,2 ms a 280 μs con una reducción del 75%.habilitar motores de recomendación en tiempo real que anteriormente requerían niveles de cachéEn el lado del rendimiento, cadaSe aplicará el procedimiento siguiente:velocidad de línea sostenida de 25GbE por puerto mientras consume menos del 5% de CPU para el procesamiento de la red, liberando el 25-30% de la capacidad central de nuevo a las aplicaciones.La siguiente tabla resume las principales métricas antes/después del piloto de producción:

Más allá del rendimiento: compatibilidad, costo y ecosistema

Para los gerentes de TI que evalúan laMCX631432AN-ADAB precioAl reutilizar las ópticas SFP28 existentes de 25GbE y mantener la compatibilidad con puertos de 10GbE durante la transición,el proveedor evitó los costes de recablado ópticoEl amplio soporte de controladores de la tarjeta en Ubuntu, Rocky Linux y VMware ESXi significaba cero refactorización de aplicaciones.MCX631432AN-ADAB para la ventaEn la actualidad, el precio por volumen se ha incrementado de forma considerable y el precio por puerto se ha reducido aún más por debajo de las ofertas competitivas de 25GbE.Compatible con el MCX631432AN-ADABEl ecosistema incluye todas las principales marcas de servidores (Dell, HPE, Lenovo, Supermicro), simplificando la adquisición en centros de datos heterogéneos.

Desde el piloto hasta la producción: una solución completa de tarjetas de adaptador Ethernet

Después de tres meses de producción de 450 servidores, el proveedor de nube ha estandarizado laSolución de tarjeta de adaptador Ethernet MCX631432AN-ADABLa combinación de baja latencia basada en RoCE, descargas de hardware,La densidad de 25GbE de doble puerto ha desbloqueado nuevas capacidades de carga de trabajo, incluida la detección de fraude en tiempo real y NVMe/TCP con RDMA.Para los arquitectos que hacen referencia a la documentación oficial, elLas especificaciones de MCX631432AN-ADABrevelará características adicionales como Secure Boot, telemetría SPIFFY y dirección de paquetes FlexFlow, todas las cuales son a prueba de futuro para la inversión en inferencia de IA y superposiciones de microservicios.

Resumen y perspectivas: La nueva línea de base para el acceso al servidor

ElNVIDIA Mellanox MCX631432AN-ADAB, también conocido como NVIDIALa tecnología de la red de 25GbE ha demostrado que un tejido RoCE de 25GbE bien ejecutado puede ofrecer baja latencia y alto rendimiento sin impuestos de la CPU.o marcos distribuidosComo señaló el arquitecto principal del proveedor, "ya no pensamos en los gastos generales de la red.Se aplicará el procedimiento siguiente:Con pilotos maduros, precios competitivos y compatibilidad perfecta,El MCX631432AN-ADAB establece un nuevo estándar de rendimiento por vatio para redes de servidores de 25GbE.