Solução técnica NVIDIA Mellanox MCX631432AN-ADAB: transporte de baixa latência RDMA/RoCE e elevação da taxa de transferência do servidor

Este white paper técnico destina-se a arquitetos de rede, engenheiros de pré-vendas e líderes de operações. Ele detalha como oNVIDIA Mellanox MCX631432AN-ADABO adaptador de servidor permite transporte de baixa latência baseado em RDMA/RoCE e melhora drasticamente o rendimento do servidor em ambientes modernos de data center.

A rede TCP/IP convencional impõe uma sobrecarga significativa de CPU devido ao processamento de protocolo, cópia de dados e tratamento de interrupções. À medida que a densidade dos servidores aumenta e aplicações como armazenamento distribuído (Ceph, vSAN), bancos de dados na memória (Redis, Aerospike) e estruturas de treinamento de IA exigem latência de microssegundos de um dígito, as pilhas de rede tradicionais tornam-se gargalos intransponíveis. Os principais requisitos incluem: latência de acesso ao armazenamento inferior a 300 µs, utilização de CPU abaixo de 10% para processamento de rede, taxa de transferência de 25 GbE de taxa de linha por porta e integração perfeita com a infraestrutura de comutação existente compatível com RoCE.

A arquitetura proposta adota uma topologia Spin-Leaf sem bloqueio com suporte RoCE v2. Cada nó de computação ou armazenamento está equipado com oPlaca de vídeo (NVIDIA Mellanox) MCX631432AN-ADABadaptador, conectando-se a switches leaf por meio de óptica SFP28 de 25 GbE. Os switches Leaf executam DCQCN (Data Center Quantized Congestion Notification) para controle de congestionamento de ponta a ponta. O plano de controle aproveita o PFC (controle de fluxo prioritário) apenas em filas com prioridade de perda, enquanto o plano de dados RDMA usa RoCE v2 com roteamento IP para atravessar os limites da camada 3. Esse design elimina o bloqueio inicial e garante latência determinística em até 2.000 nós.

OPlaca adaptadora Ethernet MCX631432AN-ADABserve como ponto de extremidade crítico para descarregamentos de RDMA. Isso éMCX631432AN-ADAB ConnectX-6 Lx porta dupla 25GbE SFP28o silício integra RoCE baseado em hardware, correspondência de tags e montagem de pacotes fora de ordem. Comparado ao software iWARP ou kernel TCP, o adaptador reduz a latência em mais de 70%. Para arquitetos que fazem referência aoFolha de dados MCX631432AN-ADAB, as principais descargas incluem:

• Descarregamento de hardware RoCE v2:Movimento de dados com cópia zero, latência porta a porta abaixo de 600ns.
• Direção FlexFlow:Analisador de pacotes programável para distribuição de fluxo granular.
• Mecanismos de criptografia em linha:IPsec/TLS em taxa de linha sem envolvimento da CPU.
• Telemetria e marcação ECN:Visibilidade de congestionamento em tempo real através de contadores SPIFFY.

Ao avaliarMCX631432AN-ADAB especificações, observe que a placa suporta velocidades de 25 GbE e 10 GbE, permitindo migrações em fases. Além disso, oCompatível com MCX631432AN-ADABecossistema inclui todos os principais fornecedores de servidores, simplificando a qualificação.

Uma topologia típica de duas camadas para um cluster de 500 nós: cada rack contém 20 servidores, cada um equipado com umNVIDIA Mellanox MCX631432AN-ADAB(ambas as portas ativas para redundância ou agregação de largura de banda). Os switches Leaf se conectam aos servidores por meio de cabos DAC SFP28 de 25 GbE (até 5 m) ou óptica AOC para distâncias maiores. Spine-layer usa uplinks de 100 GbE para manter o excesso de assinaturas de 4:1. Para tráfego de armazenamento, dedique uma porta por adaptador ao tráfego de back-end do Ceph com RoCE, reservando a segunda porta para cargas de trabalho voltadas para computação. O dimensionamento além de 2.000 nós requer um design de superespinha de três camadas, com BGP-EVPN para propagação de rota RoCE. Os arquitetos devem consultar oSolução de placa adaptadora Ethernet MCX631432AN-ADABguia para matrizes de cabeamento detalhadas e orçamento de energia.

Pós-implantação, as equipes de operações devem habilitar a NVIDIAmlx5ctleettoolpara estatísticas portuárias em tempo real. Principais métricas a serem monitoradas: pausas de transmissão RoCEv2 (indicando tempestades de PFC), taxas de pacotes marcadas ECN e leituras térmicas do adaptador. Para solucionar problemas de alta latência final, valide issoParâmetros DCQCN(alfa, beta e fator de redução de taxa) se alinham com os perfis de buffer do switch. Use oFolha de dados MCX631432AN-ADABpara interpretar contadores avançados como “out_of_seq" e “retransmissions". Forneça scripts de automação para despejar periodicamente/sys/class/infiniband/mlx5_*/portas/*/contadores/. Para o planejamento de custos, as equipes de compras podem obterPreço de MCX631432AN-ADABestimativas e verificaçãoMCX631432AN-ADAB à vendalistagens através de distribuidores autorizados; o preço por volume está disponível para pedidos de mais de 100 unidades.

OMCX631432AN-ADABoferece uma proposta de valor atraente: latência de armazenamento inferior a 300 µs, menos de 5% de sobrecarga de CPU para tráfego de taxa de linha de 25 GbE e descarregamentos completos do RoCE v2 sem alterações no aplicativo. Ao substituir pilhas TCP legadas por transporte RDMA, as organizações podem recuperar até 30% da capacidade central para cargas de trabalho críticas aos negócios. Quando comparada aos adaptadores concorrentes de 25 GbE, a arquitetura ConnectX-6 Lx oferece pipelines programáveis ​​e profundidade de telemetria superiores. Esta solução técnica foi validada em ambientes de produção que abrangem armazenamento em nuvem, simulação de HPC e análises em tempo real. Para equipes prontas para adotar malhas RoCE de 25 GbE, oNVIDIA Mellanox MCX631432AN-ADABrepresenta uma base econômica e preparada para o futuro para redes de servidores de baixa latência e alto rendimento.