Casa ImpresaAI Dell PowerEdge XE9680 per l'intelligenza artificiale generativa: piattaforma stabile, diffusione stabile, prestazioni superiori

Dell PowerEdge XE9680 per l'intelligenza artificiale generativa: piattaforma stabile, diffusione stabile, prestazioni superiori

by Jordan Ranous

Nell’arena ad alto rischio dell’intelligenza artificiale aziendale, i titani della tecnologia sono impegnati in una corsa incessante per svelare la prossima innovazione significativa nell’hardware. Dell Technologies ha recentemente introdotto Dell PowerEdge XE9680 per l'intelligenza artificiale generativa e lo è spiegandolo in un recente whitepaper. Il PowerEdge XE9680, progettato esplicitamente per affrontare i carichi di lavoro dell'intelligenza artificiale, non è solo un nuovo concorrente in gara, è un potenziale apripista.

Nell’arena ad alto rischio dell’intelligenza artificiale aziendale, i titani della tecnologia sono impegnati in una corsa incessante per svelare la prossima innovazione significativa nell’hardware. Dell Technologies ha recentemente introdotto Dell PowerEdge XE9680 per l'intelligenza artificiale generativa e lo è spiegandolo in un recente whitepaper. Il PowerEdge XE9680, progettato esplicitamente per affrontare i carichi di lavoro dell'intelligenza artificiale, non è solo un nuovo concorrente in gara, è un potenziale apripista.

Analizzando il whitepaper, abbiamo esaminato come questa centrale elettrica ridefinisce il panorama dell’IA e perché potrebbe essere l’arma segreta della tua azienda per conquistare la frontiera dell’IA.

Dell PowerEdge XE9680 per l'intelligenza artificiale generativa

Le Dell PowerEdge XE9680 è un server rack ad alta densità di GPU progettato per applicazioni ad alte prestazioni destinate ai campi dell'intelligenza artificiale. È dotato di due processori scalabili Intel Xeon di quarta generazione, ciascuno con un massimo di 4 core, e può essere dotato di otto GPU NVIDIA HGX H56 o otto GPU NVIDIA HGX A100; il tutto interconnesso con la tecnologia NVIDIA NVLink.

Dell PowerEdge XE9680 per l'intelligenza artificiale generativa

PowerEdge XE9680 supporta velocità DIMM fino a 4800 MT/s e dispone di 32 slot DIMM DDR5, con una capacità RAM massima di 4 TB. Offre fino a 8 unità SSD NVMe da 2.5 pollici per l'archiviazione, con una capacità massima di 122.88 TB. Il server include anche una serie di funzionalità di sicurezza, come firmware firmato crittograficamente, Data at Rest Encryption (DRE), Secure Boot e altro ancora. Viene gestito tramite il sistema iDRAC9 integrato e supporta una varietà di strumenti di gestione e integrazioni. Il server è alloggiato in un fattore di forma rack 6U e pesa 235.89 libbre. (107 chilogrammi).

Dell PowerEdge XE9680 per GPU con intelligenza artificiale generativa

Specifiche dell'PowerEdge XE9680

PowerEdge XE9680 è progettato per gestire carichi di lavoro AI con enormi occupazioni di memoria. Grazie a NVLink, le GPU ottengono l'accesso a una grande quantità di memoria da altre GPU nel sistema, fornendo accesso ad alta velocità alle risorse condivise. Questa significativa capacità di memoria dovrebbe portare a prestazioni più elevate, modelli più complessi e alla capacità di lavorare con set di dati più grandi e dettagliati, migliorando la precisione e l'utilità sfruttando modelli di parametri più ampi.

Modello:

  • Dell PowerEdge XE9680

Capacità del processore:

  • Compatibile con 2 prese
  • Fino a due processori scalabili Intel Xeon di quarta generazione con un massimo di 4 core per processore

Proprietà fisiche:

  • 6U raffreddato ad aria, temperatura ambiente fino a 35°C
  • Possibilità di rack da 1200 mm

Supporto di memoria:

  • Fino a 32 DIMM DDR5
  • Fino a 4800 MT/s (1DPC) o 4400 MT/s (2DPC)
Funzionalità I/O:

  • 10 x 16 slot PCIe Gen5
  • Una scheda di rete OCP 3.0
  • 2x1GbELOM

Ottimizzazione GPU:

  • GPU NVIDIA 8 x H100 SXM5 700 W 80 GB o GPU NVIDIA 8 x A100 SXM4 500 W 80 GB
  • Interconnettività NVLINK completa

Capacità di intelligenza artificiale:

  • Formazione su modelli di grandi dimensioni con intelligenza artificiale

Supporto unità:

  • Supporto per un massimo di 16 unità
  • Fino a 8 SAS/SATA/NVMe Gen4 o 16 E3.S
  • Hot-Plug BOSS N -1 posteriore (2 x M.2 MVNe) per boot (opzionale)
  • Supporto SW RAID/PERC12

Modelli di generazione di immagini: la scienza dell'arte

Hai mai desiderato poter dipingere come Van Gogh o disegnare come Da Vinci, ma ritrovarti con figure stilizzate che non impressionerebbero nemmeno un bambino dell'asilo? Entra nel mondo degli Image Generation Models (IGM), l'equivalente dell'apprendimento automatico di un artista prodigioso, senza eccentricità e berretti.

Gli IGM sono un sottoinsieme di modelli di machine learning progettati per affrontare la creazione di nuove immagini. Gli IGM rientrano nel campo più ampio della modellazione generativa, che riguarda la comprensione e la replica di modelli di dati. Tuttavia, invece di generare numeri o testo, questi modelli si occupano di creare immagini. Negli ultimi mesi, gli IGM hanno fatto notizia generando di tutto, da nuove opere d'arte a volti umani stranamente realistici.

Questi modelli hanno trovato la loro strada in ogni cosa, dall’arte e l’intrattenimento alla pubblicità e alla ricerca scientifica. Stanno creando immagini di cellule per diagnosi mediche, simulando lo spazio esterno e generando selfie così realistici che puoi pescare tu stesso. Man mano che questi modelli si evolvono, crescono i requisiti per eseguirli rapidamente.

Dell PowerEdge XE9680 per l'intelligenza artificiale generativa: potenziare l'edge, con una diffusione stabile

I metodi di diffusione, quando si generano nuove immagini durante l'inferenza, in genere dipendono da enormi cluster GPU che operano in sincronia e richiedono un ampio runtime dell'hardware. Tuttavia, il white paper di Dell rivela che con il server Dell PowerEdge XE9680, queste operazioni di intelligenza artificiale generativa possono essere notevolmente accelerate.

Ciò consente di produrre da dozzine a centinaia di immagini ragionevolmente risolte in pochi secondi. Dell sottolinea che sfruttando le funzionalità di Dell PowerEdge XE9680 per l'intelligenza artificiale generativa, è possibile produrre immagini di grandi dimensioni ad alta risoluzione (Dell ha utilizzato 2,096 x 2,096) da un singolo messaggio di testo in pochi secondi.

Immagini generate su PowerEdge XE9680 con messaggio di testo = "Ritratto di cane felice, primo piano",

XE9680 generato con il messaggio di testo = "Ritratto di cane felice, primo piano",

Le whitepaper valuta la latenza di generazione dell'immagine per il modello testo-immagine dei diffusori HuggingFace sul server PowerEdge XE9680, considerando le dimensioni del batch e le variazioni della risoluzione dell'immagine. Il server XE9680 può generare immagini con risoluzioni fino a 2,048 x 2,048.

Con l’aumento delle dimensioni dei batch, sono aumentate anche le richieste di memoria sull’infrastruttura. Pertanto, era possibile ottenere lotti di dimensioni enormi con immagini a risoluzione inferiore (come 256 x 256). Tuttavia, a causa dei limiti di memoria, le immagini ad altissima risoluzione (come 2,048 x 2,048) potevano generare solo una dimensione batch pari a uno.

PowerEdge XE9680 Tempi di generazione di immagini batch

PowerEdge XE9680 Tempi di generazione di immagini batch

Concentrandosi sulla generazione batch di immagini con risoluzioni 256 x 256 e 512 x 512 vengono mostrate le potenti funzionalità di Dell PowerEdge XE9680 per l'intelligenza artificiale generativa che genera più immagini in pochi secondi. Questa funzionalità accelera la valutazione, la messa a punto tempestiva e l'ulteriore valutazione richiesta per i cicli di progettazione creativa. Questi risultati dimostrano come è possibile generare batch di 32 immagini con risoluzione 512 x 512 con il pacchetto HuggingFace Diffusers sul server Dell PowerEdge XE9680 in meno di 10 secondi. Inoltre, è possibile creare batch di 64 immagini con risoluzione 256 x 256 in meno di 5 secondi con la stessa piattaforma, consentendo una prototipazione rapida e cicli di progettazione creativa per aziende e professionisti.

Benchmark per la generazione di immagini

Nell'analisi del white paper, il server Dell PowerEdge XE9680 è stato valutato rispetto ai benchmark di latenza di generazione delle immagini stabiliti da Lambda. Questo confronto ha coinvolto una singola GPU NVIDIA H100 con 80 GB di RAM sul server Dell PowerEdge XE9680 e il benchmark NVIDIA H100 GPU Stable Diffusion rilasciato dal team ML Labs presso Lambda.

Valori di latenza di generazione di immagini batch sia per il server Dell PowerEdge XE9680 (blu) che per il server Lambda (arancione). Entrambi gli studi hanno utilizzato una singola GPU NVIDIA® H100 con 80 GB di RAM GPU, dove il fattore di forma della GPU per la GPU del server Dell era HGX e la GPU del server Lambda era PCIe. Tutte le immagini utilizzavano lo stesso codice PyTorch dei diffusori testo-immagine HuggingFace con messaggio di testo = "una foto di un astronauta a cavallo su Marte", numero di iterazioni = 30, risoluzione immagine 512 x 512, precisione float16, pianificazione DDIM, stabile Diffusione v1.4.

Latenza di generazione delle immagini Dell PowerEdge XE9680

Lo studio ha dimostrato che l’XE9680 ha superato i benchmark di Lambda, ottenendo circa il doppio della produttività. I risultati di Dell sono presentati nello stesso formato di quelli di Lambda, utilizzando i dati dello studio sulla GPU NVIDIA H100 in condizioni identiche definite dal software. L'unica differenza era l'hardware: Lambda utilizzava una GPU NVIDIA H100 con fattore di forma PCIe, mentre il server Dell PowerEdge XE9680 utilizzava un fattore di forma HGX, che potrebbe spiegare alcune differenze di prestazioni.

Impatto aziendale dei modelli di generazione di immagini

La generazione di immagini tramite Stable Diffusion consente ai professionisti creativi di prototipare e perfezionare rapidamente il proprio lavoro, migliorando ad esempio l'efficienza delle strategie di marketing e pubblicitarie e abbreviando il time-to-market. Professionisti in campi come l’architettura, la pubblicità, il marketing, la creatività, il cinema, gli effetti speciali, la fotografia e l’arte hanno già adottato questa tecnologia.

Le tecnologie di intelligenza artificiale generativa, come Stable Diffusion, possono apportare cambiamenti trasformativi nelle operazioni aziendali, soprattutto quando la velocità è fondamentale. Nella progettazione e nello sviluppo del prodotto, questi modelli possono generare rapidamente prototipi visivi, consentendo ai team di progettazione di valutare e perfezionare i concetti in tempo reale. Ciò accelera il processo di progettazione e riduce il tempo di commercializzazione.

Uno dei concetti più interessanti viene dal settore della vendita al dettaglio. L’intelligenza artificiale potrebbe generare rapidamente immagini realistiche di varie configurazioni di prodotto o opzioni di colore in base alle preferenze del cliente, come “Mostrami questa sedia, ma in rosso” o “Come starebbe quel divano con la stampa leopardata”. Per le imprese immobiliari e di costruzione, l’intelligenza artificiale generativa potrebbe creare rapidamente visualizzazioni di nuovi edifici o progetti di ristrutturazione, aiutando nella pianificazione e nelle presentazioni di vendita.

Nel campo della formazione e dell’istruzione all’interno di un’impresa, le immagini generate dall’intelligenza artificiale possono essere utilizzate per creare scenari realistici per i programmi di formazione dei dipendenti, migliorando i risultati dell’apprendimento. La velocità di generazione delle immagini può migliorare significativamente l’agilità delle aziende, consentendo loro di rispondere in modo più efficace ai cambiamenti del mercato, alle esigenze dei clienti e ai requisiti interni.

Pensieri di chiusura

Dell PowerEdge XE9680 è un server ad alte prestazioni con capacità impressionanti in grado di gestire facilmente carichi di lavoro AI impegnativi (almeno per ora). Sebbene l'XE9680 sia rivolto al mercato di tendenza dell'intelligenza artificiale, potrebbero esserci altri casi d'uso interessanti nell'analisi e nell'elaborazione dei dati per un dispositivo così potente. Va notato che l'XE9680 è alla base Il progetto Helix di Dell, un servizio che aiuta le organizzazioni a mettere online i propri progetti di intelligenza artificiale in modo più tempestivo.

Libro bianco XE9680

Interagisci con StorageReview

Newsletter | YouTube | Podcast iTunes/Spotify | Instagram | Twitter | TikTok | RSS feed