Solução Técnica do Adaptador de Servidor NVIDIA Mellanox MCX631102AN-ADAT: Transporte de Baixa Latência RDMA/RoCE e Servidor

NVIDIA Mellanox MCX631102AN-ADAT Adaptador de servidor Solução técnica: RDMA/RoCE Transportes de baixa latência e Arquitetura de aprimoramento do rendimento do servidor

1Análise dos antecedentes e dos requisitos do projecto

Os centros de dados modernos estão passando por uma transição fundamental de arquiteturas computacionalmente centradas para arquiteturas centradas em dados.e bancos de dados distribuídos tornam-se onipresentesA rede tradicional baseada em TCP/IP impõe uma sobrecarga significativa da CPU para o processamento de protocolos.Introduz um " latency jitter " imprevisível, e não utiliza plenamente o potencial de largura de banda dos meios de comunicação modernos.

Os principais requisitos identificados em ambientes empresariais e em nuvem incluem:

• Latência sub-milissegundo:As aplicações de missão crítica, como as plataformas de negociação financeira e as análises em tempo real, exigem uma comunicação consistente e de baixa latência.
• Descarga da CPU:O processamento de protocolos de rede deve consumir menos de 10% dos recursos da CPU por nó para preservar a capacidade de computação para cargas de trabalho de aplicativos.
• Escalabilidade da largura de banda:A infraestrutura deve suportar 25GbE por porta com um caminho de atualização claro para futuras implantações de 50/100GbE.
• Integração perfeita:A solução deve ser compatível com as plataformas de servidores, sistemas operacionais e ferramentas de gestão existentes.

ONVIDIA Mellanox MCX631102AN-ADATaborda directamente estes requisitos através da sua arquitetura ConnectX-6 Lx,fornecimento de RDMA acelerado por hardware através da Ethernet Convergente (RoCE) com transferências de dados de cópia zero e capacidades de bypass do kernel.

2. Projeto geral da arquitetura de rede/sistema

A arquitetura proposta adopta uma topologia de folha-espinha otimizada para o transporte RoCE.MCX631102AN-ADAT Solução de cartão de adaptador Ethernet, implantado em cada nó do servidor para fornecer conectividade 25GbE de duas portas.

Camadas de arquitectura:

• Núcleos de computação/armazenamento:Cada servidor está equipado com um ou maisMCX631102AN-ADAT ConnectX-6 Lx com duas portas 25GbE SFP28Adaptadores, configurados com ambas as portas activas para alta disponibilidade e equilíbrio de carga.
• Capa de folha:Os switches NVIDIA Spectrum-3 fornecem redirecionamento Ethernet de baixa latência e sem perdas com controle de congestionamento consciente do RoCE (PFC / ECN).
• Capa da coluna vertebral:Os switches de coluna vertebral de alta capacidade interconectam os nós das folhas com uplinks de 100GbE, garantindo um desempenho sem bloqueio em todo o tecido.
• Plano de gestão:Rede de gerenciamento fora da banda para coleta de telemetria, orquestração de configuração e monitoramento de saúde via NVIDIA DOCA e MLNX-OS.

O projeto incorpora micro-segmentação e isolamento de tráfego usando descarga vSwitch baseada em hardware, garantindo que o tráfego do locatário permaneça isolado sem comprometer o desempenho.

3. Papel e características-chave do NVIDIA Mellanox MCX631102AN-ADAT na solução

Como a interface de rede fundamental para cada servidor, oNVIDIA Mellanox MCX631102AN-ADATdesempenha um papel fundamental na realização dos objetivos de desempenho e eficiência da arquitetura global.

De acordo com oFicha de dados MCX631102AN-ADAT, o adaptador também suporta a encriptação IPsec e MACsec in-line, garantindo a segurança dos dados em trânsito sem sacrificar o débito.Especificações MCX631102AN-ADATConfirmar o apoio à telemetria avançada, incluindo contadores de fluxo, histogramas de latência e detecção de congestionamento, que são essenciais para a gestão proativa da rede.

4Recomendações de implantação e escalagem (com topologia típica)

Para as organizações que pretendem implantar a produçãoNVIDIA Mellanox MCX631102AN-ADAT, recomenda-se a seguinte abordagem gradual:

Fase 1 - Implementação piloto (4-8 nós):Começar com um pequeno cluster para validar a configuração RoCE, ajustar os parâmetros PFC/ECN e benchmark o desempenho da aplicação.Cartão de adaptador Ethernet MCX631102AN-ADATdevem ser instalados com os drivers e firmware mais recentes da Mellanox OFED para garantir uma compatibilidade óptima.

Fase 2 Expansão da cápsula (20-50 nós):Escala para um rack ou pod completo, implantando um par de interruptores de folha com configuração Ethernet sem perdas.Ativar o gerenciamento de congestionamento baseado em hardware e configurar parâmetros DCB (Data Center Bridging) de acordo com as melhores práticas recomendadas.

Fase 3 Fabric-Wide Rollout (100+ nós):Implementar engenharia de tráfego usando capacidades de direção de hardware do adaptador, e usar oCompatibilidade MCX631102AN-ADATNVIDIA Unified Fabric Manager para orquestração e provisionamento automatizado.

Descrição de topologia típica:Uma configuração de rack padrão consiste em 20 servidores de computação/armazenamento, cada um equipado com umMCX631102AN-ADAT ConnectX-6 Lx com duas portas 25GbE SFP28. A porta 1 se conecta ao Leaf Switch A, a porta 2 se conecta ao Leaf Switch B, fornecendo caminhos redundantes.Esta topologia garante que qualquer falha de ligação única ou interruptor não afete a disponibilidade da aplicação.

5Operações, Monitorização, Solução de Problemas e Optimização

O funcionamento eficaz de uma rede baseada em RoCE requer práticas especializadas de monitorização e resolução de problemas.MCX631102AN-ADATfornece instrumentos integrados para apoiar estas atividades:

• Coleção de telemetria:Use os contadores de hardware do adaptador para monitorar a taxa de transferência por fluxo, a profundidade da fila, as quedas de pacotes e a distribuição de latência.Estes dados são inseridos em painéis de controlo centralizados para visibilidade em tempo real.
• Detecção de congestionamento:Monitorar os quadros de pausa PFC e os pacotes marcados ECN para identificar micro-explosões e pontos de tráfego.Ficha de dados MCX631102AN-ADATfornece orientações sobre a interpretação destes contadores.
• Gestão de firmware e driver:As atualizações regulares da pilha de drivers NVIDIA OFED e do firmware do adaptador são essenciais para o desempenho e a segurança.
• Ajuste de desempenho:Os principais parâmetros de ajuste incluem o ajuste do limiar do buffer PFC, a definição de limites de marcação ECN adequados e a configuração das configurações de moderação de interrupção do adaptador para equilibrar a latência e o rendimento.
• Resolução de problemas comum:A maioria dos problemas de desempenho pode ser atribuída a configurações de DCB mal configuradas, valores de MTU incompatíveis ou versões de driver incompatíveis.e mlxconfig) fornecem visibilidade abrangente sobre o estado operacional.

Para as organizações que avaliam o custo total de propriedade, oMCX631102AN-ADAT preçoA maioria das empresas considera que a redução do consumo de energia é mais importante do que a redução do consumo de energia.MCX631102AN-ADAT para vendaOs pacotes com switches NVIDIA Spectrum oferecem a solução mais econômica para implantações em campo verde.

6Resumo e Avaliação do Valor

ONVIDIA Mellanox MCX631102AN-ADATRepresenta um investimento estratégico em infraestruturas que proporciona um valor comercial mensurável em três dimensões:

Como um fim para fimMCX631102AN-ADAT Solução de cartão de adaptador Ethernet, permite que as organizações construam redes sem perdas e de alto desempenho que realizam plenamente o potencial das aplicações modernas.Ambientes de fornecedores de serviços em nuvem, ou grupos de investigação HPC, oMCX631102AN-ADATOferece consistentemente a baixa latência, alto rendimento e simplicidade operacional que os arquitetos de infraestrutura exigem.