Futuro dos dados: módulo óptico de 400g

 

 

As guerras de fatores de forma sobre as quais ninguém fala honestamente

 

Entre em qualquer conferência de rede óptica e você ouvirá o debate QSFP-DD versus OSFP enquadrado como uma comparação técnica. Não é. É uma luta política disfarçada em fichas técnicas.

QSFP-DD venceu a batalha de volume antes do lançamento do primeiro switch 400G. A compatibilidade retroativa com gaiolas QSFP28 significava que todas as operadoras de rede poderiam, teoricamente, atualizar sem destruir a infraestrutura existente. Isso "teoricamente" é um trabalho pesado-Vi engenheiros passarem fins de semana inteiros tentando fazer com que o firmware do switch legado reconhecesse módulos de-densidade dupla que se ajustam fisicamente, mas se comportam eletricamente mal.

OSFP veio do campo da Arista com uma proposta direta: módulo maior, melhores térmicas, projetado para 400G do zero, em vez de forçar oito pistas em uma gaiola construída para quatro. O dissipador de calor integrado suporta 15-20 watts sem suar muito. QSFP-DD a 12 watts? Já ultrapassando os limites térmicos em implantações de alta densidade.

A indústria escolheu QSFP-DD de qualquer maneira. A compatibilidade vence. Sempre fez.

Mas aqui está o que os artigos de comparação de fatores de forma nunca mencionam: as diferenças de capacidade térmica aumentam dramaticamente em escala. Um switch 400G de 32 portas totalmente preenchido com módulos QSFP-DD dissipa aproximadamente 640 watts apenas da óptica. Isso é antes do switch ASIC, plano de controle, ventiladores, fontes de alimentação. Estamos falando de 1,5-2 quilowatts no total em um chassi de 1RU. A engenharia de fluxo de ar necessária para manter esses módulos abaixo dos limites de temperatura da junção limita o projeto aeroespacial.

 

PAM4 tornou tudo mais difícil

 

Todos comemoram o PAM4 por dobrar a eficiência espectral. Ninguém menciona o pesadelo de engenharia que criou.

NRZ era simples. Dois níveis de tensão. O sinal representa um ou zero. Seu diagrama ocular tem uma abertura. Se estiver limpo, você está dourado.

O PAM4 transmite dois bits por símbolo usando quatro níveis de amplitude. Três aberturas para os olhos empilhadas. Cada olho tem aproximadamente um{3}}terço da altura de um olho NRZ equivalente. As margens de ruído entram em colapso. De repente, cada milímetro de traço de PCB é importante. Cada via cria reflexão. Cada descontinuidade de impedância entre o ASIC host e a gaiola do módulo óptico torna-se uma preocupação de confiabilidade.

Passei seis meses depurando uma implantação 400G onde erros aleatórios de CRC apareciam em portas específicas. A causa raiz? Um conector ligeiramente{2}}fora-das especificações na placa host criou perda de retorno suficiente para corromper o olho PAM4 mais baixo. Perfeitamente adequado para tráfego de 100G. Catastrófico para 400G.

A resposta da indústria foi a FEC obrigatória. Você não pode executar óptica PAM4 400G sem correção de erro direta-o BER bruto simplesmente excede os limites utilizáveis. RS(544.514) adiciona cerca de 300 nanossegundos de latência. Não é enorme. Mas diga isso ao cluster HPC que executa trabalhos MPI, onde cada microssegundo de latência final afeta o tempo de conclusão do trabalho.

 

 

A fotônica de silício deveria nos salvar

 

A proposta da fotônica do silício parece perfeita no papel. Aproveite décadas de investimento fabuloso em CMOS. Integre moduladores, fotodetectores e guias de onda em um único chip. Alcançar economias de escala que componentes discretos de InP e GaAs nunca conseguiriam. O consumo de energia cai 20-30%. Os custos eventualmente alcançam a paridade e depois prejudicam as abordagens tradicionais.

A Intel vendeu mais de três milhões de transceptores fotônicos de silício 100G. Alibaba implantou módulos fotônicos de silício 400G DR4 em sua rede de nuvem a partir de 2020. A tecnologia funciona.

Mas a fotônica do silício tem um segredo sujo: as fontes de luz ainda não podem ser de silício.

Você precisa de um laser externo-normalmente uma matriz de fosfeto de índio-ligado ao PIC de silício ou acoplado via fibra. Essa integração híbrida acrescenta complexidade de fabricação. Os rendimentos sofrem. A vantagem de custo que todos prometeram continua sendo empurrada para outra geração.

As empresas que estão dobrando a aposta na fotônica de silício para 400G incluem algumas pessoas muito inteligentes que fazem apostas muito caras. As aquisições da Luxtera e da Acacia pela Cisco totalizaram US$ 3,26 bilhões. Isso não é dinheiro do orçamento de P&D. Isso é investimento estratégico em infraestrutura.

Os dados de participação de mercado contam uma história mais complicada. De acordo com a LightCounting, os módulos fotônicos de silício ainda representam menos de 10% do total de remessas de 400G, apesar de anos de entusiasmo. Os transceptores tradicionais-baseados em EML dominam as aplicações DR4 e FR4. A transição tecnológica está acontecendo mais lentamente do que sugeriam os comunicados de imprensa.

 

O que as folhas de especificações escondem sobre o alcance

 

A convenção de nomenclatura IEEE para óptica 400G parece útil até que você tente realmente comprar módulos.

400G-SR8: 100 metros em fibra multimodo. Oito pistas paralelas a 850nm. Ótimo para conexões-dentro do rack. Terrível para qualquer outra coisa.

400G-DR4: 500 metros em fibra-monomodo. Quatro pistas paralelas a 1310nm. O carro-chefe para a maioria das interconexões de data centers.

400G-FR4: 2 quilômetros, modo{4}}único, comprimentos de onda CWDM multiplexados em um par de fibra. Usa lasers modulados externamente caros.

400G-LR4: 10 quilômetros. Mesmo esquema de comprimento de onda do FR4, mas com amplificação óptica para ampliar o alcance.

Bastante simples. Exceto que os fabricantes brincam de forma rápida e solta com essas designações constantemente.

Já vi módulos "compatíveis com DR4" que atingem 500 metros em condições de laboratório e falham em 300 metros com uma planta de fibra real que apresenta perda de conector ligeiramente elevada. A especificação diz 500 metros com orçamento de link de 7dB. A matemática funciona perfeitamente, assumindo conexões primitivas em todos os lugares. A realidade inclui conectores sujos, emendas imperfeitas e passagens de fibra que percorreram um caminho um pouco mais longo através do teto do que o indicado nos desenhos de gerenciamento de cabos.

O alcance de 2 km do FR4 parece adequado até que você conecte edifícios em um campus e descubra que seu caminho de fibra mede 2,3 quilômetros. Agora você precisa de módulos LR4 com um custo três vezes maior, ou é criativo com a amplificação, ou aceita que esse link não funcionará de fato.

 

A decisão DR4 versus FR4

 

Este é realmente importante para implantações reais e ninguém explica bem.

DR4 usa quatro fibras paralelas para transmissão e quatro para recepção. Total de oito fibras. Conector MPO-12 com quatro posições não utilizadas. Alcance máximo de 500 metros. Consumo de energia normalmente de 8 a 10 watts. O módulo custa cerca de 60% do equivalente FR4.

O FR4 usa multiplexação por divisão de comprimento de onda para colocar todas as quatro pistas em um único par de fibras. Conector LC duplex. Alcance máximo de 2 quilômetros. O consumo de energia normalmente é de 10 a 12 watts. Preço premium porque os lasers EML não são baratos.

A topologia da fibra determina tudo.

Data center Greenfield com cabeamento estruturado que você especifica? Fibra paralela faz sentido. Passe cabos tronco MPO entre as fileiras. Use DR4 em qualquer lugar. O custo óptico mais baixo compensa a fibra extra.

Ambiente brownfield com planta de fibra duplex existente? FR4 ou você está puxando um cabo novo.

Ambiente misto com algumas execuções paralelas e alguma planta legada duplex? Bem-vindo ao pesadelo da compatibilidade. Você acabará com os dois tipos de módulos, diferentes estilos de conectores e pelo menos um gabinete onde alguém usou o patch cord errado e passou quatro horas solucionando alertas de "link down".

 

A questão emergente

 

Um módulo-DR4 de 400G contém quatro pistas de 100G. Cada pista opera independentemente na camada óptica. Isso permite a conexão-breakout de uma porta de switch 400G a quatro dispositivos 100G separados usando um conjunto de fibra breakout.

A economia parece convincente. Uma porta 400G. Quatro servidores 100G. Não há necessidade de portas de switch adicionais.

A realidade é mais complicada.

Os Switch ASICs nem sempre suportam configurações de breakout arbitrárias. Algumas plataformas requerem firmware específico. Outros permitem apenas o breakout em determinados grupos de portas. Alguns implementam o breakout no hardware, mas a pilha de software não expõe a opção de configuração.

Pior: cabos breakout criam pesadelos de suporte. O problema é o módulo 400G, o conjunto breakout ou uma das quatro portas do dispositivo 100G? A solução de problemas requer a troca de cabos, o teste de cada perna de forma independente e a oração para que o problema seja reproduzível.

Já vi organizações padronizarem o 100G nativo em todos os lugares, especificamente para evitar complicações de ruptura. A óptica custa mais. A densidade da porta do switch é prejudicada. Mas a simplicidade operacional vence.

 

 

Realidade do consumo de energia

 

Cada folha de dados do módulo 400G lista o consumo de energia. Os números são tecnicamente precisos e praticamente inúteis.

Um QSFP-DD DR4 pode especificar 8,5 watts típicos. Esse é o módulo retirado do trilho de 3,3 V do switch em condições normais de operação. Não inclui a energia adicional que o switch ASIC consome ao dirigir essas oito pistas 50G PAM4. Isso não leva em conta a sobrecarga de gerenciamento térmico-ventiladores mais potentes, fluxo de ar adicional e talvez resfriamento suplementar.

Com 32 portas por switch, a diferença entre os módulos de 8 watts e 12 watts chega a 128 watts. Isso não é trivial quando você planeja a distribuição de energia para uma linha inteira de racks.

A mudança de 100G para 400G não quadruplica o consumo de energia por porta-os ganhos de eficiência decorrentes da integração e das melhorias no DSP ajudam. Mas a potência agregada por switch aumentou totalmente. Os data centers que planejaram infraestruturas elétricas e de refrigeração em torno de densidades de 100G estão descobrindo restrições de capacidade ao atualizar para 400G com população total.

 

Compatibilidade não é binária

 

Os fornecedores adoram afirmar “compatível com todas as principais plataformas de switch”. Esta afirmação é tecnicamente defensável e praticamente enganosa.

A compatibilidade do módulo óptico depende de mais do que ajuste físico e sinalização elétrica. Os protocolos DOM (Monitoramento Óptico Digital) variam entre os fornecedores. As implementações de CMIS (Especificação de Interface de Gerenciamento Comum) têm flexibilidade suficiente para que duas implementações "compatíveis" possam não interoperar de maneira limpa. Alguns switches verificam os códigos de identificação do fornecedor e se recusam totalmente a acender módulos não reconhecidos.

O mercado cinza de óptica 400G "compatível" explodiu precisamente porque os módulos de marca-custam 3-5x mais do que alternativas de terceiros. Algumas dessas alternativas funcionam perfeitamente. Outros causam problemas sutis que só se manifestam em padrões de tráfego específicos ou após semanas de funcionamento.

Eu testei pessoalmente módulos 400G DR4 de terceiros que passaram em todas as medições de conformidade no laboratório e geraram erros FEC incorrigíveis em 2% do tráfego sob carga de produção. A temperatura dentro do módulo sob operação sustentada de alta-largura de banda excedeu o que os componentes ópticos podiam suportar. O módulo funcionou. Até que isso não aconteceu.

 

O que 800G significa para 400G

 

A transição 800G já está em andamento. Os hiperescaladores estão implantando 800G hoje. O resto da indústria seguirá o exemplo dentro de 18 a 24 meses.

Isso não torna o 400G obsoleto-os módulos serão fornecidos por anos-mas muda a economia.

O 800G usa oito pistas de 100G em vez das oito pistas de 50G do 400G. Mesma modulação PAM4, maior taxa de símbolos por pista. A física fica mais difícil. Os envelopes térmicos chegam a 20-25 watts por módulo. A vantagem do headroom térmico do OSFP torna-se mais relevante nesses níveis de potência.

Mais importante ainda, os módulos 800G podem chegar a configurações duplas de 400G. Um módulo 800G-2xDR4 fornece dois links 400G independentes. Para ambientes com requisitos mistos de 400G e 800G, esse recurso de breakout simplifica o gerenciamento de inventário.

Os operadores de data center com quem converso estão, em sua maioria, mantendo 400 G para conectividade leaf{1}}spine enquanto avaliam 800 G para interconexões de cluster de GPU, onde a densidade da largura de banda é mais importante. As cargas de trabalho de treinamento de IA com todos{4}}para{5}}todos os padrões de comunicação realmente sobrecarregam os links de 400G de uma forma que o tráfego tradicional norte-sul nunca fez.

 

O horizonte óptico co{0}}empacotado

 

Todos na indústria sabem que o CPO está chegando. Transceptores ópticos integrados diretamente com switch ASICs. Nenhum módulo conectável. O consumo de energia cai de 15 picojoules por bit para talvez 5, potencialmente abaixo de 1 picojoule à medida que a tecnologia amadurece.

NVIDIA anunciou planos de CPO para hardware 2025/2026. Meta e Microsoft demonstraram protótipos. A OIF está padronizando interfaces.

A questão não é se o CPO acontece. É se isso acontece rápido o suficiente para ser importante para o seu ciclo de planejamento atual.

Minha leitura: a óptica conectável dominará pelo menos até 2028 para a maioria das implantações. O CPO pode aparecer em compilações personalizadas do hiperescalador anteriormente. A flexibilidade operacional dos módulos-com troca a quente-a capacidade de substituir uma óptica com falha sem desligar um switch-é extremamente importante para ambientes sem redundância N+1 em todos os lugares.

Planeje hoje mesmo 400G e 800G conectáveis. Orçamento para avaliação do CPO em três anos. Não deixe que os slides do roteiro do fornecedor acelerem cronogramas que a realidade da produção não pode suportar.

 

Orientação prática que realmente ajuda

 

Para novas construções: padronize o DR4 com infraestrutura de fibra paralela. A economia de custos em relação ao FR4 é composta por milhares de módulos. Planeje energia e resfriamento para 10 watts por módulo, mesmo que as folhas de especificações prometam 8.

Para atualizações: audite obsessivamente sua planta de fibra existente. Conheça a perda real medida em cada segmento. Descubra as violações do limite DR4 de 400 metros antes que sua óptica chegue.

Para clusters de IA: 800G já é a resposta certa. As demandas de largura de banda justificam o prêmio. Não dê-meio passo para 400G se suas cargas de trabalho superarem esse limite em 18 meses.

Para todos: teste extensivamente a óptica-de terceiros antes da implantação do volume. A economia de custos é real. Assim são os fracassos. Valide suas plataformas de switch específicas sob carga realista antes de comprometer o investimento em estoque.

A tecnologia funciona. Vinte milhões de módulos 400G e 800G foram enviados em 2024 por um motivo. Mas a transição do 100G requer atenção aos detalhes que as folhas de especificações e os materiais de marketing omitem convenientemente. A física não se importa com o cronograma de implantação.