La confluenza della simulazione con l’IA rivoluziona tutto
Questa convergenza ha imposto nuove sollecitazioni sullo storage HPC, dato che i modelli di input/output di entrambi i carichi di lavoro non potrebbero essere più dissimili. E sta succedendo proprio ora. Un recente studio della società di analisi indipendente Intersect360 ha rilevato che al momento il 63% degli utenti HPC esegue già programmi di machine learning. Hyperion Research prevede che, di questo passo, le spese di storage HPC nelle organizzazioni della pubblica amministrazione e nelle aziende cresceranno il 57% più rapidamente rispetto a quelle di elaborazione HPC nei prossimi tre anni.
+ mostra di più
Seymour Cray una volta affermò: "Chiunque può costruire una CPU veloce. Il difficile è realizzare un sistema veloce". Quando si tratta di HPC e intelligenza artificiale, chiunque può costruire uno storage di file veloce. Il difficile è realizzare un sistema per lo storage di file veloce che sia anche economicamente vantaggioso e scalabile. Otteniamo questo risultato incorporando i principali file system paralleli nei prodotti di storage parallelo di HPE, con una riduzione dei costi intrinseca.
La nuova era dello storage HPC: il meglio di entrambi i mondi
| | Cluster HPC tradizionale | Una nuova era convergente | Stack di IA tradizionale (POD) |
|---|---|---|---|
Carico di lavoro primario | Modellazione e simulazione | Entrambi | Machine learning/Deep learning |
Tipo di nodo di elaborazione
| Nodi per CPU come HPE Apollo 2000 | Entrambi | Nodi per GPU come HPE Apollo 6500 |
Numero di nodi di elaborazione | Da centinaia a migliaia | Da centinaia a migliaia | Alcuni |
Interconnessione tipica | InfiniBand | Entrambi (in più HPE Slingshot) | Gigabit Ethernet |
Modello I/O primario | Uso intensivo di scrittura | Entrambi | Uso intensivo di lettura |
Capacità di storage misurata in | Petabyte | Petabyte | terabyte |
Scalabilità di storage in un unico spazio dei nomi | Fino a exabyte | Fino a exabyte | Fino a petabyte a due cifre basse |
Storage tipico | Storage per file system paralleli basati sull’HDD | Cray ClusterStor E1000 Storage HPE Parallel File System | Storage NAS all flash enterprise |
Storage adatto a | Servire file grandi in ordine sequenziale a velocità fino a terabyte per secondo | Servire file di qualsiasi dimensioni sia in ordine sequenziale sia casuale a velocità fino a terabyte per secondo | Servire file di tutte le dimensioni sia in ordine sequenziale che casuale a velocità fino a gigabyte a due cifre per secondo |
Prezzo per terabyte | $ | $$ | $$$$$ |
Prestazioni scalabili ed economicamente vantaggiose
Progettati per garantire ottime prestazioni e una scalabilità che supera di gran lunga quella orizzontale del NAS, i nostri sistemi di storage utilizzano i principali file system paralleli e non richiedono licenze basate sulla capacità. HPE Pointnext fornisce supporto per il sistema di storage completo, hardware e software.
| | HPE Parallel File System Storage | Cray ClusterStor E1000 Storage System |
|---|---|---|
File system parallelo | IBM Spectrum Scale Erasure Code Edition | Lustre |
Solitamente collegato a | Cluster di sistemi HPE Apollo o server rack HPE ProLiant DL con adattatori HPE IB HDR/Ethernet 200 Gb | Supercomputer HPE Cray EX o cluster di grandi dimensioni di sistemi HPE Apollo e server HPE ProLiant DL |
Numero di nodi di elaborazione | Da decine a poche centinaia | Da diverse centinaia a migliaia |
Tipo di nodi di elaborazione | GPU e/o CPU | GPU e/o CPU |
Connesso a | InfiniBand HDR o 100/200 GbE | HPE Slingshot o InfiniBand HDR o 100/200 GbE |
Set di funzioni di storage di livello enterprise | Completezza | Base |
Protocolli supportati | POSIX, NFS, SMB, HDFS, Object | POSIX |
Scalabilità orizzontale tipicamente in | Terabyte (a partire da 27 TB) | Petabyte (a partire da 1 PB) |
Più adatto per HPC e IA in | Produzione, sanità e scienze biologiche, servizi finanziari, high tech, industria farmaceutica, telecomunicazioni, vendita al dettaglio e per home directory nelle organizzazioni elencate nella colonna a destra | Laboratori di ricerca e università, enti di difesa e di intelligence, agenzie spaziali, ricerca sul clima, previsioni meteorologiche e scienze geologiche, compreso il settore Oil&Gas |
Soluzioni di storage parallelo per la nuova era
Che tu preferisca IBM Spectrum o Lustre, abbiamo il sistema di storage parallelo che fa al caso tuo. E con HPE Data Management Framework (DMF) V7, puoi spostare i file tra e al di fuori di loro a fini di protezione dati o di archiviazione a lungo termine.
+ mostra di più
Questo sistema di storage incorpora Lustre, il principale file system parallelo per i casi d'uso scientifici e di tipo federale. È ideale per il collegamento con HPE Slingshot, InfiniBand HDR e 100/200 GbE ai supercomputer HPC Cray EX e ai grandi cluster di sistemi HPE Apollo o server rack HPE ProLiant DL che eseguono carichi di lavoro di modellazione e simulazione, intelligenza artificiale o analisi dati ad alte prestazioni. I servizi HPE Pointnext Services supportano sia l'hardware sia il software.
Questo sistema di storage incorpora IBM Spectrum Scale, il principale file system parallelo per le imprese. È ideale per il collegamento con InfiniBand HDR e 100/200 GbE ai cluster di sistemi HPE Apollo o ai server rack HPE ProLiant DL che eseguono carichi di lavoro di modellazione e simulazione, intelligenza artificiale o analisi dati ad alte prestazioni. I servizi HPE Pointnext Services supportano sia l'hardware sia il software. I server di storage sono server rack HPE ProLiant DL economicamente vantaggiosi.
Ottimizza le risorse di storage HPC supportando un’architettura di gestione dello storage gerarchica a più tier. HPE Data Management Framework ottimizza l’utilizzo delle risorse di storage per ridurre il TCO e semplifica i flussi di lavoro dei dati con movimenti automatizzati ampiamente collaudati nell’intera gerarchia di storage. Ora con assistenza nativa per IBM Spectrum Scale, oltre che per Lustre e HPE XFS.