Home Empreendimento Podcast nº 104: o que há de mais recente em HPC e armazenamento escalável

Podcast nº 104: o que há de mais recente em HPC e armazenamento escalável

by Haroldo Fritts

Brian consegue que Curtis Anderson, da Panasas, se junte a ele para uma visão profunda e detalhada da HPC. Curtis é arquiteto de software da Panasas e copresidente do grupo de trabalho de armazenamento MLCommons. O que é o Grupo de Trabalho de Armazenamento do MLCommons? MLCommons é um consórcio da indústria que trabalha para acelerar o aprendizado de máquina e aumentar seu impacto positivo na sociedade. Ele publica vários padrões para o desempenho de modelos AI/ML, entre outras coisas. Como um dos copresidentes, Curtis define padrões para avaliar o desempenho de subsistemas de armazenamento que alimentam ambientes AI/ML.

Brian consegue que Curtis Anderson, da Panasas, se junte a ele para uma visão profunda e detalhada da HPC. Curtis é arquiteto de software da Panasas e copresidente do grupo de trabalho de armazenamento MLCommons. O que é o Grupo de Trabalho de Armazenamento do MLCommons? MLCommons é um consórcio da indústria que trabalha para acelerar o aprendizado de máquina e aumentar seu impacto positivo na sociedade. Ele publica vários padrões para o desempenho de modelos AI/ML, entre outras coisas. Como um dos copresidentes, Curtis define padrões para avaliar o desempenho de subsistemas de armazenamento que alimentam ambientes AI/ML.

Como arquiteto de software na Panasas, Curtis coordena todas as equipes de tecnologia no escritório de Sunnyvale: plataforma, OSD (dispositivo de armazenamento de objetos), gerenciamento de CLI/GUI, gateway NFS e CIFS e interface com as equipes de hardware e controle de qualidade. Ele também pode escrever código novamente (!).

O mercado de armazenamento scale-out com um conjunto de recursos comerciais está crescendo rapidamente, e concorrentes como a NetApp têm o conjunto de recursos comerciais, mas não conseguiram dominar o scale-out. A Panasas tem 15 anos de desempenho em expansão e a resiliência que todos desejam, mas precisa do conjunto de recursos comerciais que alguns players comerciais possuem.

Brian se aprofunda na tecnologia e pede a Curtis para explicar os casos de uso e a estrutura do software, onde o Panasas se encaixa no mercado geral e seus novos sistemas de flash.

Este é um ótimo podcast; se HPC for do seu interesse, você deve ouvir. São apenas 45 minutos, mas se você quiser pular, colocamos alguns timestamps abaixo:

00: 00 Introdução

  • história da supercomputação
  • Casos de uso – HPC
  • Hardware
    • Novas características
    • Dimensionar
    • Sistemas paralelos vs. sistemas tradicionais

05:00 Como funcionam os sistemas Panasas

  • Por que foi inventado
  • Melhor para arquivos moderados/grandes
  • Nós para tipos de carga de trabalho

10:00 Estrutura do software

  • PanFS
  • Mais sobre sistemas de arquivos paralelos
  • Por que os grandes provedores não abordaram o F/S paralelo

15:00 Como lida com vários projetos de HPC

  • Onde a Panasas se encaixa no mercado
  • Restrições de mídia e entretenimento
    • Onde o PanFS se encaixa
    • CGI

20:00 Como funciona o M&A

  • Por que o CGI é diferente
  • Diferença entre as cargas de trabalho M7E e HPC
  • O que cabe no mercado de HPC
  • AI / ML

25:00 Custos

  • GPU's
  • Despesa instantânea
  • Estratégias de computação
  • Conjunto de habilidades necessário

30:00 Como abrir uma empresa menor para HPC

  • como recrutar
  • Voltar para a nuvem
    • A nuvem é o pote de mel
    • Fácil de usar
    • Baixo custo
    • Não configurado para HPC
  • Um sistema Panasas pode ser consumido na nuvem
  • Como arquitetar o PanFS para Cloud

35:00 Colocação da Borda

  • Difícil de justificar

40:00 Impacto Ambiental

  • Eficiência
  • O que a Panasas viu como casos de uso de HPC
  • A HPC tradicional está mudando
    • Petróleo e Gás
    • Empresas de exploração agora procuram campos de sal para armazenar combustível

45:00 Como envolver Panasas

Encerramento e Encerramento

Grupo de vídeo no YouTube

Assine nosso podcast:

Envolva-se com a StorageReview

Newsletter | YouTube | Podcast iTunes/Spotify | Instagram | Twitter | Facebook | TikTok | RSS feed