Casa Impresa Podcast n. 104: le ultime novità su HPC e storage scalabile

Podcast n. 104: le ultime novità su HPC e storage scalabile

by Harold Fritt

Brian convince Curtis Anderson di Panasas a unirsi a lui per una visione approfondita e dettagliata dell'HPC. Curtis è Software Architect presso Panasas e copresidente del MLCommons Storage Working Group. Cos'è il gruppo di lavoro sullo storage di MLCommons? MLCommons è un consorzio industriale che lavora per accelerare l'apprendimento automatico e aumentarne l'impatto positivo sulla società. Pubblica, tra le altre cose, diversi standard per le prestazioni dei modelli AI/ML. In qualità di copresidente, Curtis definisce gli standard per valutare le prestazioni dei sottosistemi di storage che alimentano gli ambienti AI/ML.

Brian convince Curtis Anderson di Panasas a unirsi a lui per una visione approfondita e dettagliata dell'HPC. Curtis è Software Architect presso Panasas e copresidente del MLCommons Storage Working Group. Cos'è il gruppo di lavoro sullo storage di MLCommons? MLCommons è un consorzio industriale che lavora per accelerare l'apprendimento automatico e aumentarne l'impatto positivo sulla società. Pubblica, tra le altre cose, diversi standard per le prestazioni dei modelli AI/ML. In qualità di copresidente, Curtis definisce gli standard per valutare le prestazioni dei sottosistemi di storage che alimentano gli ambienti AI/ML.

In qualità di architetto software presso Panasas, Curtis coordina tutti i team tecnologici nell'ufficio di Sunnyvale: piattaforma, OSD (dispositivo di archiviazione oggetti), gestione CLI/GUI, gateway NFS e CIFS e interfaccia con i team hardware e QA. Può anche scrivere di nuovo il codice (!).

Il mercato dello storage scalabile con un set di funzionalità commerciali sta crescendo rapidamente e concorrenti come NetApp dispongono del set di funzionalità commerciali ma non sono stati in grado di padroneggiare la scalabilità orizzontale. Panasas vanta 15 anni di prestazioni scalabili e la resilienza che tutti desiderano, ma ha bisogno del set di funzionalità commerciali di cui dispongono alcuni operatori commerciali.

Brian approfondisce la tecnologia e chiede a Curtis di spiegare i casi d'uso e la struttura del software, dove Panasas si inserisce nel mercato generale e i loro nuovi sistemi flash.

Questo è un ottimo podcast; se l'HPC è interessante, dovresti ascoltarlo. Sono solo 45 minuti, ma se vuoi fare un salto, di seguito abbiamo inserito alcuni timestamp:

00: 00 Intro

  • Storia del supercalcolo
  • Casi d'uso – HPC
  • Hardware
    • Nuove caratteristiche
    • Scalabilità orizzontale
    • Sistemi paralleli vs. sistemi tradizionali

05:00 Come funzionano i sistemi Panasas

  • Perché è stato inventato
  • Ideale per file moderati/grandi
  • Nodi per tipi di carico di lavoro

10:00 Struttura del software

  • PanFS
  • Altro sui file system paralleli
  • Perché i grandi fornitori non hanno affrontato il Parallel F/S

15:00 Come gestisce più progetti HPC

  • Dove si colloca Panasas nel mercato?
  • Vincoli relativi ai media e all'intrattenimento
    • Dove si adatta PanFS
    • CGI

20:00 Come funziona M&E

  • Perché la CGI è diversa
  • Differenza tra carichi di lavoro M7E e HPC
  • Ciò che si adatta al mercato HPC
  • AI / ML

25:00 Costi

  • di GPU
  • Spesa lampo
  • Strategie di calcolo
  • Competenze necessarie

30:00 Come costituire una piccola azienda per l'HPC

  • Come reclutare
  • Torniamo alla nuvola
    • Cloud è il vaso di miele
    • Facile da usare
    • Basso costo
    • Non configurato per HPC
  • Un sistema Panasas può essere consumato nel cloud
  • Come progettare PanFS per il Cloud

35:00 Posizionamento dei bordi

  • Difficile da giustificare

40:00 Impatto ambientale

  • EFFICIENZA
  • Cosa ha visto Panasas come casi d'uso HPC
  • L’HPC tradizionale sta cambiando
    • Olio e Gas
    • Le società di esplorazione sono ora alla ricerca di campi di sale per immagazzinare carburante

45:00 Come coinvolgere Panasas

Chiusura e riepilogo

Pod video su YouTube

Iscriviti al nostro podcast:

Interagisci con StorageReview

Newsletter | YouTube | Podcast iTunes/Spotify | Instagram | Twitter | Facebook | TikTok | RSS feed