Solución Técnica de Switch InfiniBand NVIDIA Mellanox MQM9790-NS2F
October 14, 2026
NVIDIA Mellanox MQM9790-NS2F InfiniBand Switch Solución técnica para la optimización de interconexión de baja latencia para RDMA, HPC y clústeres de IA
Análisis de los antecedentes y requisitos del proyecto
Los centros de datos modernos que admiten la capacitación de modelos grandes de IA, la simulación de HPC y el almacenamiento distribuido están migrando rápidamente de 200Gb/s HDR a 400Gb/s NDR.La tensión central para los arquitectos de red es que la densidad de nodos de GPU sigue aumentando, mientras que la latencia de comunicación entre nodos y el jitter se convierten en el factor limitante para la eficiencia del clúster.Un solo salto congestionado o una capa de tela mal configurada puede reducir la utilización efectiva de la GPU en cientos de nodos.
Los requisitos típicos para este tipo de proyecto incluyen una latencia determinística baja para operaciones colectivas, transporte sin pérdidas para RDMA y NVMe sobre tejidos, radix alto para mantener el tejido plano,y un camino claro de actualización que proteja la inversión existenteEl NVIDIA Mellanox MQM9790-NS2F está posicionado para cumplir con estos requisitos como un conmutador NDR InfiniBand de 400Gb/s dentro de la familia Quantum-2.
Diseño general de la arquitectura de red y sistema
La arquitectura recomendada es un tejido InfiniBand de dos niveles basado enteramente en enlaces NDR. Los switches de hoja conectan servidores de GPU, objetivos de almacenamiento y nodos de administración,mientras que los interruptores de columna proporcionan conectividad entre hojas y diversidad de trayectoriasEste diseño mantiene el número de saltos bajo y garantiza un ancho de banda no bloqueante para el tráfico este-oeste, que domina las cargas de trabajo de IA y HPC.
En la capa de punto final, los adaptadores de canal de host operan en modo RDMA, lo que permite transferencias de memoria a memoria sin intervención de la CPU.y la aceleración colectivaEl tráfico de gestión y telemetría comparte la misma infraestructura física, pero está aislado a través de políticas de calidad de servicio, por lo que el monitoreo no interfiere con las cargas de trabajo de producción.
Los principios clave de diseño incluyen:
- Topología plana para minimizar la latencia y simplificar la resolución de problemas
- Enlaces no bloqueantes o de baja sobresubscripción entre niveles
- RND coherente de extremo a extremo para evitar cuellos de botella de generación mixta
- Pistas redundantes para una alta disponibilidad y balanceo de carga
- Gestión estándar de InfiniBand para la coherencia operativa
Papel y características clave del NVIDIA Mellanox MQM9790-NS2F
El NVIDIA Mellanox MQM9790-NS2F sirve como el bloque de construcción de este tejido.permitir a los arquitectos diseñar una red más plana con menos nivelesCada puerto OSFP puede operar a velocidad NDR, y la configuración de 64 puertos admite funciones de hoja y columna vertebral de alta radix.
Para los equipos que revisan las especificaciones MQM9790-NS2F, la plataforma admite NVIDIA SHARPv3 para aceleración colectiva, control avanzado de congestión y enrutamiento adaptativo.Estas características se dirigen directamente a los problemas de latencia de cola y incast comunes en la capacitación de IA y las cargas de trabajo de MPIEl switch MQM9790-NS2F InfiniBand también se integra con las herramientas de gestión InfiniBand estándar, lo que reduce la curva de aprendizaje operativo.
Al planificar una solución de conmutador MQM9790-NS2F InfiniBand, los arquitectos deben confirmar los componentes compatibles MQM9790-NS2F, incluidos los cables OSFP, los adaptadores de canal host y las versiones de firmware.La revisión de la hoja de datos MQM9790-NS2F al principio de la fase de diseño ayuda a validar la potencia, refrigeración y espacio de rack antes de la adquisición.
Recomendaciones para el despliegue y la ampliación
Una implementación típica comienza con un módulo piloto de 32 a 64 nodos GPU conectados a un par de interruptores de hoja MQM9790-NS2F.el uso de unidades adicionales MQM9790-NS2F para mantener el ancho de banda no bloqueanteEste enfoque incremental permite validar la latencia y el rendimiento antes del despliegue a gran escala.
Para el escalado, la práctica recomendada es mantener la tela simétrica: añadir la capacidad de la hoja y la columna vertebral en incrementos iguales para que las proporciones de sobre suscripción sigan siendo predecibles.La gestión de los cables y el etiquetado de los puertos deben estandarizarse desde el principio, porque las implementaciones OSFP de alta densidad pueden ser difíciles de mantener si el diseño físico es inconsistente.
La tabla siguiente resume una consideración de diseño representativa de dos niveles:
| Capa | El papel | Configuración típica |
|---|---|---|
| Hojas | Conectar nodos de GPU y almacenamiento | MQM9790-NS2F, 400Gb/s en enlaces descendentes NDR |
| Espinilla | Conectividad entre hojas | MQM9790-NS2F, enlaces ascendentes sin bloqueo |
| Dirección | Telemetría y orquestación | Fuera de banda o aislado QoS en banda |
Operaciones, monitoreo, solución de problemas y optimización
El éxito operativo depende de la visibilidad. Las telas InfiniBand proporcionan contadores para errores de enlace, eventos de congestión y utilización de búfer.Estos deben recopilarse de forma continua y correlacionarse con los datos del programador de trabajos, de modo que las regresiones de rendimiento se pueden rastrear a segmentos de tejido específicos en lugar de adivinar.
Los escenarios comunes de resolución de problemas incluyen puestos de crédito, QoS mal configurado y incompatibilidades de firmware entre switches y adaptadores.Confirmar la política de rutaEn la actualidad, el sistema de control de la congestión puede reducir el tiempo medio para la resolución.ya que las cargas de trabajo de IA y HPC son sensibles al peor comportamiento.
Para la adquisición y la planificación del ciclo de vida, los equipos a menudo comparan el precio de MQM9790-NS2F y las opciones de venta de MQM9790-NS2F a través de canales autorizados.y región, por lo que se recomienda un compromiso temprano con los distribuidores y representantes empresariales de NVIDIA.
El NVIDIA Mellanox MQM9790-NS2F proporciona una base NDR de alto radix, 400Gb/s para la interconexión de racimos RDMA, HPC y AI. Al reducir los niveles de tejido, soportando la aceleración colectiva,y permitir el transporte sin pérdidas de baja latencia, se aborda los cuellos de botella de rendimiento que limitan la eficiencia del cluster en el mundo real.representa un bloque de construcción práctico y escalable para la próxima generación de telas InfiniBand.