Solución técnica del adaptador de servidor NVIDIA Mellanox MCX623106AN-CDAT
June 10, 2026
Este documento técnico proporciona a los arquitectos de redes, ingenieros de preventa y equipos de operaciones un diseño de solución integral centrado en laNVIDIA Mellanox MCX623106AN-CDAT. Abordamos cómo lograr una baja latencia determinista y maximizar el rendimiento del servidor utilizando RDMA/RoCE en entornos de centros de datos modernos.
1. Análisis de requisitos y antecedentes del proyecto
Las pilas TCP/IP tradicionales introducen una sobrecarga significativa (manejo de interrupciones, copias de memoria y cambio de contexto) que limita el rendimiento de las aplicaciones, especialmente para NVMe-oF, bases de datos distribuidas y clústeres de entrenamiento de IA. Los requisitos clave para las infraestructuras de próxima generación incluyen:
- Latencia de extremo a extremo inferior a 10 µs para almacenamiento y análisis en tiempo real
- Omisión de CPU para liberar núcleos para la lógica empresarial (objetivo: <20 % de uso de CPU relacionado con la red)
- Estructura Ethernet sin pérdidas que admite PFC y ECN en topologías de hoja de 100 GbE
- Cifrado en línea sin degradación del rendimiento (IPsec/TLS)
- Integración perfecta con marcos de automatización existentes (Ansible, Terraform)
2. Arquitectura general de red y sistema
La arquitectura de referencia adopta una topología de hoja de dos niveles con puertos de 100 GbE en todas partes. Cada nodo de computación/almacenamiento está equipado conMCX623106AN-CDAT Adaptador ConnectX Tarjeta de red PCIe. Elementos clave de diseño:
- Conmutadores de hoja: configurados con búfer compartido de 4 MB, prioridades PFC 3 (almacenamiento) y 4 (tráfico AI), umbral de marcado ECN a una profundidad de cola de 200 KB
- Conmutadores de columna: estructura sin bloqueo de 12,8 Tbps, relación de sobresuscripción de 3:1 (optimizada para patrones este-oeste)
- Configuración del host: PCIe 4.0 x16 (o PCIe 5.0 cuando esté disponible), 256 MB de memoria de firmware por adaptador
- Transporte RDMA: RoCEv2 con control de congestión DCQCN, MTU 4K, datos en línea de hasta 256 bytes
ElMCX623106AN-CDAT Solución de tarjeta adaptadora Ethernetadmite hasta 1024 funciones virtuales (VF) y 256 funciones físicas (PF), lo que lo hace ideal para NFV y cargas de trabajo en contenedores.
3. Función de NVIDIA Mellanox MCX623106AN-CDAT y características clave
ElNVIDIA Mellanox MCX623106AN-CDATSirve como motor del plano de datos, descargando todo el procesamiento de la red desde la CPU del host. Según elHoja de datos MCX623106AN-CDATy oficialMCX623106AN-CDAT especificaciones, las capacidades críticas incluyen:
| Característica | Beneficio para RDMA/RoCE |
|---|---|
| Dirección de hardware (ASAP²) | Paquetes directos a colas específicas: cero intervención de la CPU |
| Gestión de congestión RoCE en chip | DCQCN implementado en firmware: granularidad de respuesta de 100 ns |
| GPUDirect® RDMA | Acceso a la memoria de la GPU sin pasar por la memoria del host: reducción de latencia de 2 µs |
| Aceleración VirtIO | Rendimiento nativo para redes de VM/contenedores |
ElTarjeta adaptadora Ethernet MCX623106AN-CDATTambién incluye arranque seguro y cifrado flash, cumpliendo con estrictas políticas de seguridad para los sectores financiero y gubernamental.
4. Recomendaciones de implementación y expansión
Para implementaciones brownfield, el adaptador está completamenteCompatible con MCX623106AN-CDATcon conmutadores de 100 GbE existentes (broadcom, Mellanox, Cisco) después de la actualización del firmware. Fases de implementación recomendadas:
- Fase 1 (validación de laboratorio):Dos nodos de almacenamiento + dos nodos de computación, habilitan PFC y ECN por puerto, validan con ib_write_bw (rendimiento objetivo de 98 Gb/s por puerto)
- Fase 2 (piloto):Un bastidor completo (40 nodos), implemente DCQCN con umbrales de ECN: mínimo=150 KB, máximo=500 KB
- Fase 3 (ampliación horizontal):Multi-rack con capa central, monitorea los fotogramas de pausa PFC globales (mantiene <0,1 % del tráfico total)
Para la expansión, el adaptador admite agregación de enlaces (LAG) y enrutamiento adaptativo (AR) cuando se usa con conmutadores NVIDIA Spectrum. Los entornos de velocidad mixta (de 100 GbE a 25 GbE) requieren reservas de búfer en los puertos de salida.
5. Operaciones, monitoreo y solución de problemas
El marco NVIDIA DOCA proporciona telemetría completa. Las métricas de seguimiento esenciales incluyen:
- Contadores por cola:rdma_out_of_sequence, cnp_sent, cnp_received (a través de ethtool -S)
- Estado de PCIe:Errores corregibles/incorregibles, negociación de velocidad de enlace (herramienta mlxlink)
- Detección de congestión:Temporizadores de vigilancia PFC, proporción de paquetes marcados ECN (objetivo <5%)
Solución de problemas comunes: si el rendimiento de RoCE cae por debajo de 80 Gb/s, verifique la bifurcación de PCIe (debe ser x16), desactive TSO/GRO y confirme los umbrales de conmutación ECN. Para aquellos que evalúanPrecio de MCX623106AN-CDAT, la solución normalmente logra un retorno de la inversión en un plazo de 9 a 12 meses al consolidar el número de servidores.
6. Resumen y evaluación de valor
ElNVIDIA Mellanox MCX623106AN-CDATofrece una estructura determinista y de baja latencia al tiempo que reduce la sobrecarga de la CPU hasta en un 75 % en comparación con las redes basadas en software. Esta guía de soluciones incluye un diseño de arquitectura detallado, características clave, pasos de implementación y mejores prácticas operativas. Organizaciones que buscanMCX623106AN-CDAT a la ventaPuede ponerse en contacto con distribuidores autorizados para obtener unidades de evaluación. Para referencia completa, el funcionarioHoja de datos MCX623106AN-CDATy detalladoMCX623106AN-CDAT especificacionesestán disponibles bajo petición.