Meta, Nvidia e OpenAI se unem para DESTRUIR a InfiniBand: A Revolução Ethernet para IA Chegou!

A dominação da InfiniBand no mercado de redes de alta velocidade está sob pressão com o movimento de padrões abertos da Ethernet. Uma nova iniciativa do Open Compute Project (OCP), chamada Ethernet for Scale-Up Networking (ESUN), visa estabelecer padrões abertos para conexões de alto desempenho em clusters de inteligência artificial. A Meta, em parceria com a Nvidia, AMD, Cisco e OpenAI, está liderando essa colaboração para explorar como a Ethernet pode competir com interconexões existentes, como a InfiniBand, em data centers de larga escala. Outras empresas, incluindo Arista, ARM, Broadcom, HPE Networking, Marvell, Microsoft e Oracle, também estão participando. A InfiniBand domina o mercado de redes de alta velocidade para IA, representando cerca de 80% da infraestrutura que conecta GPUs e aceleradores. O grupo ESUN acredita que a maturidade, a relação custo-benefício e a interoperabilidade da Ethernet a tornam uma forte candidata para escalar clusters de IA. Ao contrário dos sistemas proprietários, a familiaridade da Ethernet entre os engenheiros pode reduzir a complexidade no gerenciamento de grandes cargas de trabalho de IA. Os defensores argumentam que o uso da Ethernet como um padrão aberto permitirá que os operadores dimensionem a infraestrutura, reduzindo os custos. A iniciativa de novas ferramentas de IA da OCP se baseia em trabalhos anteriores sob seu programa SUE-Transport (SUE-T), que explorou o transporte Ethernet para sistemas multi-processadores

. Os participantes do ESUN se reunirão regularmente para definir padrões para o comportamento do switch, incluindo cabeçalhos de protocolo, tratamento de erros e transferência de dados sem perdas. O grupo também estudará como o projeto de rede afeta o balanceamento de carga e a ordenação de memória em sistemas baseados em GPU. Ele planeja coordenar com o Ultra Ethernet Consortium e o órgão de padrões IEEE 802.3 para garantir o alinhamento em todo o ecossistema Ethernet. Várias empresas já desenvolveram produtos baseados em Ethernet voltados para a escala de IA - o switch Tomahawk Ultra da Broadcom, por exemplo, suporta até 77 bilhões de pacotes por segundo, e a plataforma Spectrum-X da Nvidia também combina Ethernet com hardware de aceleração para clusters de IA. A Meta, que co-fundou a OCP em 2011, vê o ESUN como uma extensão natural de sua busca por hardware aberto em data centers. No entanto, observadores notam que a substituição das redes InfiniBand estabelecidas exigiria que a Ethernet se provasse sob as cargas de trabalho de IA mais exigentes, onde a latência e a confiabilidade são críticas. O sucesso do ESUN dependerá do equilíbrio entre abertura e desempenho. Os defensores vislumbram um futuro em que os sistemas de IA serão executados em hardware interoperável usando tecnologias Ethernet padronizadas. No entanto, dada a escala e a sensibilidade da infraestrutura de IA, permanece incerto se o impulso da indústria se afastará decisivamente das interconexões proprietárias. Por enquanto, o ESUN representa um esforço ambicioso, e ainda não se sabe se ele pode igualar o desempenho da InfiniBand.

📝 Sobre este conteúdo Esta matéria foi adaptada e reescrita pela equipe editorial do TudoAquiUSA com base em reportagem publicada em Techradar . O texto foi modificado para melhor atender nosso público, mantendo a precisão factual. Veja o artigo original aqui.