NVIDIA Mellanox MMAIB00-B150D Data Center Transceiver Óptico em Prática

Transceptor óptico para data center NVIDIA Mellanox MMAIB00-B150D na prática | Equilibrando largura de banda e distância entre links rack a rack e entre instalações

Antecedentes e Desafio: A compensação entre largura de banda e distância de 25G em ambientes de protocolo misto

À medida que as operadoras de data center atualizam simultaneamente suas redes de acesso a servidores de 10G para 25G, mantendo malhas Ethernet e InfiniBand separadas para treinamento de IA, armazenamento e computação de uso geral, a camada de interconexão óptica enfrenta um conjunto único de desafios. Para transceptores 25G SFP28, a principal compensação tem sido entre alcance e flexibilidade de protocolo: alguns módulos são otimizados para Ethernet 25GBASE-SR com alcance de 100 metros no OM4, enquanto outros são qualificados especificamente para ambientes 25G InfiniBand HDR com alcance semelhante, mas diferentes requisitos de integridade de sinal. Os arquitetos de rede normalmente são forçados a manter SKUs de transceptores separados para cada tipo de malha, aumentando a complexidade do inventário e o risco de implantar o módulo errado em uma determinada porta do switch.

Este desafio foi recentemente abordado por uma empresa global de serviços financeiros que implementou um novo cluster de investigação em IA em três centros de dados adjacentes. O cluster exigia conectividade de 25G para tráfego de armazenamento Ethernet e InfiniBand de 25G para comunicação GPU a GPU, com distâncias de link variando de 5 metros (intra-rack) a 90 metros (entre corredores e entre fileiras). A equipe de engenharia precisava de um único transceptor 25G SFP28 que pudesse oferecer desempenho confiável em protocolos e faixas de distância, eliminando a necessidade de ciclos de qualificação separados e reduzindo o estoque de peças sobressalentes. ONVIDIA Mellanox MMAIB00-B150Dsurgiu como a solução ideal, oferecendo um transceptor óptico de 25G com suporte Ethernet/InfiniBand de protocolo duplo e alcance de 100 metros em fibra OM4.

Solução e implantação: uma estratégia óptica unificada de 25G através de Ethernet e InfiniBand

Para enfrentar os desafios de distância de largura de banda e flexibilidade de protocolo, a empresa padronizou oNVIDIA Mellanox MMAIB00-B150Dcomo o único transceptor óptico de 25G para todos os links de fibra multimodo em todo o cluster de pesquisa de IA. EsseTransceptor óptico MMAIB00-B150Dopera em fibra multimodo duplex padrão usando tecnologia VCSEL de 850 nm, suportando protocolos Ethernet 25GBASE-SR e 25G InfiniBand HDR sem reconfiguração de firmware. O alcance de 100 metros do módulo na fibra OM4 e o alcance de 70 metros na fibra OM3 forneceram ampla cobertura para todos os links intra-hall, enquanto a capacidade de protocolo duplo permitiu um inventário unificado de transceptores em toda a estrutura de armazenamento Ethernet e estrutura de computação InfiniBand da empresa.

A implantação foi executada em quatro zonas distintas, cada uma com requisitos específicos de cabeamento e conectividade:

• Zona A (Intra-rack, 2–5 metros):Patch cords LC duplex diretos das portas do switch SFP28 para NICs de servidor. A margem do link excedeu 6 dB, garantindo uma operação robusta mesmo com degradação moderada do conector.
• Zona B (racks adjacentes, 8–25 metros):Cabeamento estruturado OM4 via bandejas de fibra suspensas com patch panel intermediários. Contagem total de conectores: 2 pares acoplados por link. Margem do link: 4,5–5,0 dB, dentro do orçamento óptico do módulo, conforme documentado noFolha de dados MMAIB00-B150D.
• Zona C (corredor transversal / entre filas, 30–70 metros):Troncos OM4 pré-terminados direcionados sob pisos elevados. Para manter a margem mínima de 3,0 dB, a equipe realizou limpeza nas extremidades de todos os conectores antes da instalação e verificou a perda de inserção usando um medidor de potência óptica durante o comissionamento.
• Zona D (conexões entre corredores, 80–90 metros):Usado para conexões entre os três corredores adjacentes do data center. A margem do link a 90 metros no OM4 era de aproximadamente 3,0 dB, exigindo limpeza meticulosa do conector, conformidade do raio de curvatura e verificação da margem de potência durante o comissionamento.

Porque oNVIDIA Mellanox MMAIB00-B150DéCompatível com MMAIB00-B150Dcom switches Ethernet NVIDIA Spectrum e switches NVIDIA Quantum InfiniBand, bem como adaptadores da série ConnectX e DPUs BlueField, a equipe conseguiu implantar o mesmo SKU de transceptor em toda a malha sem qualquer configuração ou qualificação específica de protocolo. EsseRede óptica de data center MMAIB00-B150D MellanoxA solução eliminou a necessidade de inventários separados de transceptores Ethernet e InfiniBand, reduzindo significativamente a complexidade de aquisição e o risco de provisionamento incorreto.

Resultados e benefícios: ganhos mensuráveis ​​em custo, simplicidade e flexibilidade de protocolo

A análise pós-implantação dos 1.800 links ópticos revelou diversas vantagens quantificáveis. Primeiro, ao padronizar oSolução de transceptor óptico MMAIB00-B150D, a organização eliminou a necessidade de SKUs separados de transceptores Ethernet e InfiniBand, reduzindo o estoque de transceptores em 50% e simplificando os processos de pedidos. OPreço do MMAIB00-B150D, quando avaliado em relação ao custo combinado de módulos separados somente Ethernet e somente InfiniBand, proporcionou uma economia de custos de 30% por link porque a capacidade de protocolo duplo eliminou a necessidade de dois inventários separados com custos indiretos associados.

Em segundo lugar, a taxa de falhas operacionais durante os primeiros nove meses foi excepcionalmente baixa: apenas quatro substituições de transceptores foram necessárias de 1.800 unidades – uma taxa de falhas de 0,22% – o que é significativamente inferior à média da indústria de 0,5–0,8% para transceptores 25G SFP28 em ambientes de protocolo misto. Essa confiabilidade pode ser atribuída ao alinhamento óptico otimizado de fábrica e ao rigoroso controle de qualidade do MMAIB00-B150D, bem como à adesão da equipe aos procedimentos de limpeza especificados noespecificações deMMAIB00-B150D.

Terceiro, a eficiência energética doNVIDIA Mellanox MMAIB00-B150D— consumindo menos de 1,5 W por módulo — contribuiu para economias mensuráveis ​​de refrigeração. Em toda a frota implantada, os 1.800 transceptores consumiram aproximadamente 2,6 kW no total, em comparação com os 3,6 kW estimados se os módulos Ethernet e InfiniBand separados tivessem sido mantidos (cada um com perfis de potência ligeiramente diferentes). Esta redução de energia de 28% melhorou diretamente a métrica de Eficiência no Uso de Energia (PUE) da instalação em cerca de 0,02 pontos.

Do ponto de vista operacional, a capacidade de protocolo duplo proporcionou benefícios significativos durante eventos de manutenção. Quando um switch na estrutura Ethernet precisasse ser substituído, a equipe poderia simplesmente mover os transceptores MMAIB00-B150D existentes do switch antigo para o novo sem se preocupar com a compatibilidade do protocolo. Da mesma forma, quando a estrutura InfiniBand foi expandida, o mesmo SKU do transceptor foi usado, eliminando a necessidade de prever separadamente a demanda do transceptor específico do protocolo. A interface de monitoramento de diagnóstico digital (DDM) do módulo forneceu visibilidade em tempo real da integridade óptica em ambas as malhas, permitindo que a equipe de operações identificasse e abordasse a degradação do link antes que ela afetasse as cargas de trabalho de produção.

Resumo e perspectivas: um modelo para arquitetura óptica versátil de 25G

A experiência de implantação com oNVIDIA Mellanox MMAIB00-B150Dem várias zonas de distância e em malhas Ethernet e InfiniBand demonstra claramente que um único e bem caracterizado transceptor 25G SFP28 pode atender com eficácia à compensação entre largura de banda e distância e aos requisitos de flexibilidade de protocolo dos modernos data centers de IA. Ao aproveitar o alcance de 100 metros doMMAIB00-B150Dsobre a fibra OM4 e sua capacidade de protocolo duplo, os arquitetos podem evitar o custo e a complexidade de vários SKUs ópticos, mantendo a integridade do sinal e a simplicidade operacional em links intra-rack, entre racks, entre corredores e entre corredores.

Olhando para o futuro, à medida que a Ethernet 25G e a InfiniBand 25G continuam a servir como base da camada de acesso para treinamento de IA, HPC e ambientes de armazenamento corporativo, a demanda por transceptores ópticos versáteis e de protocolo duplo só crescerá. O MMAIB00-B150D está bem posicionado para essa trajetória, porque sua ampla compatibilidade com plataformas NVIDIA Mellanox e formato SFP28 padrão garante integração perfeita com a infraestrutura atual e atualizações futuras. Para organizações que planejam migrações semelhantes de 10G para 25G ou implantam malhas de IA de protocolo misto, a abordagem em camadas validada nesta implantação oferece um roteiro prático: padronizar no MMAIB00-B150D para todos os links de fibra multimodo 25G de até 100 metros, reservar soluções de maior alcance para links superiores a 100 metros e manter uma estrutura de monitoramento unificada que aproveita dados DDM para gerenciar proativamente a integridade óptica em Ethernet e Tecidos InfiniBand.

Para modelos detalhados de orçamento de links, listas de verificação de instalação e protocolos de limpeza, consulte oFolha de dados MMAIB00-B150De as notas de aplicação óptica NVIDIA Mellanox.