La convergence entre la simulation et l’IA change tout
Cette convergence fait peser de nouvelles exigences sur le stockage HPC car les modèles d’entrée/sortie de ces deux charges de travail sont diamétralement opposés. Et c’est ce qui est en train de se produire. Une étude récente du cabinet d’analystes indépendant Intersect360 a révélé que 63 % des utilisateurs de HPC exécutent déjà des programmes de machine learning. Eu égard à la situation actuelle et à l’évolution en cours, Hyperion Research prévoit que les dépenses en stockage HPC dans les organisations et les entreprises du secteur public augmenteront 57 % plus rapidement que les dépenses de calcul HPC au cours des trois prochaines années.
+ afficher plus
Seymour Cray a dit un jour : « N’importe qui peut créer un processeur rapide. C’est créer un système rapide qui est difficile. » En matière de HPC et d’IA, n’importe qui peut créer un stockage de fichier rapide. Ce qui est difficile c’est de créer un système de stockage de fichier qui soit à la fois rapide, économique et évolutif. Nous y sommes parvenus en intégrant les systèmes de fichiers parallèles leaders dans les produits de stockage parallèle de HPE tout en optimisant le rapport coût-efficacité dès la conception.
Nouvelle ère du stockage HPC : le meilleur des deux mondes
| | Cluster HPC traditionnel | Nouvelle ère de la convergence | Stack traditionnelle d’IA (POD) |
|---|---|---|---|
Charge de travail principale | Modélisation et simulation | Les deux | Machine learning/deep learning |
Type de nœud de calcul
| Nœuds UC comme HPE Apollo 2000 | Les deux | Nœuds GPU comme HPE Apollo 6500 |
Nombre de nœuds de calcul | Des centaines à des milliers | Des centaines à des milliers | Quelques-uns |
Interconnexion type | InfiniBand | Les deux (plus HPE Slingshot) | Gigabit Ethernet |
Motif I/O principal | Écriture intensive | Les deux | Lecture intensive |
Capacité de stockage mesurée en | Pétaoctets | Pétaoctets | Téraoctets |
Évolutivité du stockage dans un espace de nom unique | Peut atteindre les exaoctets | Peut atteindre les exaoctets | Pétaoctets dans la fourchette basse à deux chiffres |
Stockage type | Stockage de système de fichiers parallèle sur disques durs | Cray ClusterStor E1000 Système de stockage de fichiers parallèle HPE | Stockage NAS d’entreprise 100 % flash |
Stockage bien adapté pour | Servir des fichiers volumineux dans un ordre séquentiel, à des vitesses pouvant atteindre les téraoctets par seconde | Servir des fichiers volumineux dans un ordre séquentiel à des vitesses pouvant atteindre les téraoctets par seconde | Servir des fichiers de toutes tailles dans un ordre séquentiel et aléatoire à des vitesses pouvant atteindre des valeurs à deux chiffres de gigaoctets par seconde |
Prix par téraoctet | $ | $$ | $$$$$ |
Performance évolutive et économique
Conçus pour offrir des performances et une évolutivité bien au-delà du NAS à évolutivité horizontale, nos systèmes de stockage utilisent les systèmes de fichier parallèle leaders et n’ont pas besoin des licences basées sur la capacité du système de fichier. HPE Pointnext prend en charge l’ensemble du système de stockage, du matériel et des logiciels.
| | Système de stockage de fichiers parallèle HPE | Système de stockage Cray ClusterStor E1000 |
|---|---|---|
Système de fichiers parallèles | IBM Spectrum Scale Erasure Code Edition | Lustre |
Généralement rattaché aux… | Clusters de systèmes HPE Apollo ou de serveurs rack HPE ProLiant DL avec adaptateurs HPE IB HDR/Ethernet 200 Gbit/s | Superordinateurs HPE Cray EX ou très grands clusters de systèmes HPE Apollo et de serveurs HPE ProLiant DL |
Nombre de nœuds de calcul | De quelques dizaines à quelques centaines | De plusieurs centaines à plusieurs milliers |
Type de nœuds de calcul | GPU et/ou CPU | GPU et/ou CPU |
Connecté avec | InfiniBand HDR ou 100/200 GbE | HPE Slingshot ou InfiniBand HDR ou 100/200 GbE |
Ensemble de fonctions de stockage à l’échelle de l’entreprise | Complet | Basique |
Protocoles pris en charge | POSIX, NFS, SMB, HDFS, Objet | POSIX |
Évolutivité horizontale généralement mesurable en… | Téraoctets (à partir de 27 To) | Pétaoctet (à partir de 1 Po) |
Convient particulièrement au HPC et à l’IA dans les domaines suivants… | Fabrication, santé et sciences de la vie, services financiers, hautes technologies, production pharmaceutique, télécoms, commerce de détail et répertoires de base dans les organisations listées dans la colonne de droite | Laboratoires de recherche et universités, agences de défense et de renseignement, agences spatiales, recherche climatologique, prévision météo, géosciences, y compris pétrole et gaz |
Solutions de stockage parallèle pour la nouvelle ère
Que vous préfériez IBM Spectrum ou Lustre, nous avons le système de stockage parallèle qui vous convient. Et avec HPE Data Management Framework (DMF) V7, vous pouvez déplacer les fichiers entre ces systèmes ou vers un système externe à des fins de protection ou d’archivage à long terme des données.
+ afficher plus
Ce système de stockage intègre Lustre, le système de fichiers parallèle leader pour les cas d’utilisation scientifiques et ceux du gouvernement fédéral américain C’est la solution idéale pour une interconnexion entre HPE Slingshot, InfiniBand HDR ou 100/200 GbE et les supercalculateurs HPC Cray EX ou les grands clusters de systèmes HPE Apollo ou de serveurs rack HPE ProLiant DL exécutant des charges de travail de modélisation et simulation, d’IA ou d’analyse de données haute performance. HPE Pointnext Services prend en charge les logiciels et le matériel.
Ce système de stockage intègre IBM Spectrum Scale, le système de fichiers parallèle leader du marché pour les entreprises. C’est la solution idéale pour une interconnexion entre InfiniBand HDR ou 100/200 GbE et les clusters de systèmes HPE Apollo ou de serveurs rack HPE ProLiant DL exécutant des charges de travail de modélisation et simulation, d’IA ou d’analyse de données haute performance. HPE Pointnext Services prend en charge les logiciels et le matériel. Les serveurs de stockage sont des serveurs rack HPE ProLiant DL économiques.
Optimisez vos ressources de stockage HPC à l’aide d’une architecture de gestion de stockage hiérarchisé. HPE Data Management Framework optimise l’utilisation des ressources de stockage pour un coût total de possession réduit, et rationalise les workflows de données grâce à un mécanisme longuement éprouvé de déplacement de données automatisé à l’échelle de la hiérarchie de stockage. Il offre désormais une prise en charge native d’IBM Spectrum Scale en plus de Lustre et HPE XFS.