AMD Helios

Sistema de IA em rack com 72 GPUs AMD Instinct MI455X para computação de alto desempenho.

595Visualizações
Ir para o site

Visão geral

Descrição da rede neural AMD Helios

AMD Helios é uma empresa de soluções de hardware que constitui rack Uma coleção de 72 gráficos AMD Instinct MI455X em um único caso. Esta plataforma está focada no uso em data centers e é projetada para executar tarefas intensivas em recursos relacionadas ao treinamento de modelos de rede neural de grande tempo.

O produto também está posicionado como o primeiro sistema de IA rack que usa exatamente 72 GPU MI455X. configuração . Assim. O layout fornece uma alta densidade de cálculos que permite às organizações resolver problemas complexos sem a necessidade de clusters distribuídos com grande número de servidores individuais.

A ideia chave do dispositivo

A principal tarefa da Helios é fornecer aos clientes o máximo de potência computacional. A abordagem de colocar 72 GPUs em um chassis visa a simplificação Reduzir custos de infraestrutura ao trabalhar com modelos de inteligência artificial do tamanho dos parâmetros dos quais está sempre crescendo.

Características da AMD Helios

CaracterizaçãoSignificado
Tipo de sistemaSistema de IA ascendente
Número GPU72.
Modelo GPUInstinto AMD MI455 X
Factor de formaMontagem em rack do servidor
TarefaCálculo de alto desempenho (HPC), treinamento de rede neural e inferência

Para quem a rede neural AMD Helios é adequada?

O dispositivo é concebido para um círculo estreito de consumidores pelo qual é necessário trabalhar arduamente . Compacidade e alta concentração de recursos tornam o sistema atraente para organizações com espaço limitado para data centers.

Laboratórios de investigação empresarial

Grandes empresas de tecnologia que envolveram o desenvolvimento de modelos fundamentais próprios (línguas) multimodal necessidade em milhares de GPUs. A Helios permite que você coloque uma parte significativa dessas capacidades simplificando a gestão de infraestrutura.

Organizações de investigação

Institutos acadêmicos e laboratórios estaduais Desafios críticos na modelagem climática genômica Físicas de alta energia e outras disciplinas científicas Eles podem usar Helios para supercomputadores. cálculo em que o acesso é de importância crítica A capacidade dos aceleradores GPU.

Provedores de nuvem

Empresas Fornecendo serviços GPU baseados em nuvem (GPU-as-a-Service pode usar esta plataforma para a organização. segmentos elevados de seus próprios data centers e oferece aos clientes a capacidade de locação.

Como usar a rede neural AMD Helios?

O sistema é hardware Portanto, seu uso implica instalação física e configuração na infraestrutura do cliente. Não é acesso à nuvem. Exactamente. instrução Trabalhar com o sistema nas molas abertas não No entanto, a lógica de trabalhar com tais soluções rack é padrão.

Incorporar infra-estruturas existentes

O dispositivo está a ser montado. em servidor-rack . É necessário garantir uma boa refrigeração e alimentação Como um sistema com 72 GPUs consome uma quantidade significativa de energia e gera muito calor.

Configurar o software

Para trabalhar com a GPU AMD Instinct é usado programatic AMD (ROCm drivers) stack. Após a instalação, o sistema será necessário implantar frameworks de aprendizado de máquina (por exemplo, PyTorch ou TensorFlow ) com suporte para ROCm e configurar a interação de nós dentro do sistema para aprendizagem de modelos distribuídos.

Funções básicas da AMD Helios

A funcionalidade do sistema é determinada seu conteúdo de hardware e nomeação. Software específico , que iria no conjunto e executar algumas tarefas únicas, não é declarado.

  • Cálculos de alto desempenho: Capacidade de realizar cálculos paralelos 72 GPUs simultaneamente.
  • Ensinando grandes modelos: Adequado para treinar redes neurais com um grande número de parâmetros.
  • Interferência da rede neural: Aplicabilidade Declarada para Lançamento e Manutenção Modelo treinado exigindo grandes recursos de cálculo.
  • Cálculo de alta densidade: Concentração grande número de reforço gráfico no mesmo edifício rack.

Benefícios da AMD Helios

Esta decisão tem uma série de mais óbvios que ligados em seu projeto e componentes utilizados.

Escalabilidade e densidade

A principal vantagem é Combinar 72 aceleradores MI455X em um gabinete . Isto reduz os requisitos. para a área ocupada e simplifica a organização de alimentos e refrigeração comparativamente na contagem de servidores de configuração GPU. O sistema pode ser escalado. que estabelece No rack mais módulos Helios.

Gestão da eficiência

Administrar um sistema é mais fácil do que um conjunto de muitos nós autônomos . Isso reduz o tempo de manutenção e potencialmente reduz os custos operacionais. infra-estruturas.

Desvantagens da AMD Helios

Apesar das características impressionantes O sistema tem e desvantagens óbvias resultando em audiência arquitetônica.

Limiar de entrada elevado

Tal solução não está disponível para as pequenas e médias empresas devido ao elevado custo do próprio equipamento e ao custo da sua manutenção. incluindo electricidade e arrefecimento industrial.

Pedido limitado

O sistema não é adequado para pequenos Não é economicamente viável ter 72 GPUs para computação de pequeno porte.

Complexidade da operação

Necessário. equipe qualificada trabalho qualificado em AMD Instinct hardware bem com pilha de software que nem sempre conveniente e amplamente distribuído Como CUDA da NVIDIA.

Quais são os desafios para a AMD Helios

O sistema está focado exclusivamente no cenário computacional intensivo em recursos . É basicamente uma tarefa. que não é possível resolver em equipamentos de servidor convencionais em um tempo razoável.

  • Ensinar grandes modelos linguísticos (MLM): Modelos de treinamento com trilhões de parâmetros exigem uma enorme quantidade. potência computacional Esta é uma combinação de 72 GPUs.
  • Modelo científico: Simulações processos físicos Cálculos químicos e cálculos matemáticos exigindo produtividade supercomputador.
  • Inferência e conclusão: Operação de grandes Misturas de especialistas (MoEs) ou enormes redes neurais em produção, onde necessário resposta mínima retardada em alta carga.
  • Processamento de dados: Análise e processamento de conjuntos de dados ultragrandes onde são usados algoritmos acelerados por GPU.

AMD Helios preços

O custo do sistema é segredo comercial e não é divulgado em molas abertas . Obviamente, preço Baseado no número de GPUs instaladas (72 unidades) e será nas centenas de milhares de dólares americanos, e provavelmente mais de um milhão de dólares. . Números exatos dependem da configuração , a quantidade de memória instalada MI455X (dados sobre os quais não indicou e condições fornecedor.

Termos de Uso da AMD Helios

O produto é hardware corporativo. Não está. entregues regularmente compradores retalhista . A aquisição do dispositivo ocorre através de contratos diretos com a AMD ou parceiros autorizados para pessoas colectivas . Normalmente, tais transações são individuais. caráter e incluir contratos adicionais de suporte técnico e manutenção. Informações substanciais sobre a norma Não há condições de licenciamento para este modelo de distribuição.

Disponibilidade da AMD Helios

Informações sobre o amplo anúncio de mercado e oficial O fornecimento do sistema não foi publicado publicamente. O dispositivo está no lugar. soluções encomendadas ou limitadas disponíveis para grandes empresas . A disponibilidade depende provavelmente da disponibilidade de componentes. GPU MI455X) e capacidade de produção de AMD. A este respeito, é impossível comprar um dispositivo na venda aberta - este é um produto de peça para projetos específicos.

O que distingue AMD Helios dos análogos

A principal diferença é a construção arquitetônica do sistema. Existem soluções de outros fabricantes no mercado. por exemplo NVIDIA DGX SuperPOD ), que também combinam múltiplas GPUs em um rack . No entanto, Helios usa apenas hardware AMD.

Independência da plataforma

É um dos poucos. classe alta pontilhada construída É baseado em AMD Instinct MI455X GPU. Dá aos clientes. Aqueles que preferem ou são obrigados a usar a tecnologia AMD têm a capacidade de alcançar desempenho ultra-alto. Nenhuma transferência para ecossistemas proprietários de outros fornecedores.

A disposição

Ao contrário de muitos. análogo onde no rack frequentemente instalado vários nós separados servidor-lado, Helios está posicionado Como um único sistema com 72 GPUs em um caso. Isso pode dar vantagens na densidade do layout e interconexões dentro do sistema. Embora os pormenores técnicos destes As diferenças não são divulgadas.

Conclusão

AMD Helios é poderoso. , solução de hardware nicho projetado para resolver problemas de classe extra no campo da inteligência artificial e cálculo científico. Sistema O 72-GPU Instinct MI455X é voltado para grandes empresas e empresas de pesquisa e desenvolvimento. O centro exigiu a máxima densidade de computação e que estão dispostos a investir recursos consideráveis infra-estruturas próprias . O produto está em segmento premium e requer uma alta experiência técnica em operação . Tendo em conta a falta de dados públicos sobre preços e disponibilidades A decisão de compra é tomada individualmente com o fabricante. Helios é a resposta lógica da AMD à crescente demanda por modelos de equipamentos de treinamento em larga escala e seu valor primário: Alta concentração de energia GPU.

Treinamento de grandes redes neurais
Lançamento de inferência em modelos grandes
Cálculo científico

Perguntas mais frequentes

Consulte também

Sistema de IA AMD Helios com 72 GPUs