CONVERGÊNCIA DE IA E HPC PARA SUAS NECESSIDADES DE ARMAZENAMENTO
Essa confluência gera novas demandas de armazenamento de HPC, uma vez que os padrões de entrada/saída de ambas as cargas de trabalho são muito diferentes. E isso está acontecendo neste momento. Um estudo recente da empresa de análise independente Intersect360 descobriu que 66% dos usuários de HPC hoje já executa programas de machine learning. A Hyperion Research prevê que, de acordo com o curso e a velocidade atuais, os gastos com armazenamento de HPC das organizações e empresas do setor público crescerá 57% mais rapidamente do que os gastos com computação de HPC nos próximos três anos.
+ mostrar mais
Seymour Cray disse uma vez: "Qualquer um consegue construir uma CPU rápida. A questão é construir um sistema rápido”. Quando se trata de HPC e IA, qualquer um consegue criar um armazenamento de arquivos rápido. A questão é construir um sistema de armazenamento de arquivos que seja ao mesmo tempo rápido, eficiente em termos de custo e expansível. Nós alcançamos isso ao incorporar o sistema líder de arquivos paralelos aos produtos de armazenamento paralelo da HPE com custo-eficácia integrado.
ARMAZENAMENTO HPE: HPC E IA UNIDAS EM FAVOR DE UM MAIOR DESEMPENHO
| | Cluster HPC tradicional | Nova era convergente | Pilha de IA tradicional (POD) |
|---|---|---|---|
Carga de trabalho primária | Modelagem e simulação | Ambos | Machine learning/deep learning |
Tipo de nó de computação
| Nós de CPU, como HPE Apollo 2000 | Ambos | Nós de GPU, como HPE Apollo 6500 |
Número de nós de computação | De centenas a milhares | De centenas a milhares | Alguns |
Interconexão típica | InfiniBand | Ambos (mais HPE Slingshot) | Gigabit Ethernet |
Padrão de E/S primário | Gravações intensivas | Ambos | Leituras intensivas |
Capacidade de armazenamento medida em | Petabytes | Petabytes | Terabytes |
Capacidade de expansão de armazenamento em um único espaço de nomes | Até exabytes | Até exabytes | Até dois dígitos de petabytes |
Armazenamento típico | Armazenamento de sistema de arquivos paralelo baseado em HDD | Cray ClusterStor E1000 Armazenamento de sistema de arquivos paralelos HPE | Armazenamento NAS empresarial all-flash |
Armazenamento adequado para | Atender arquivos grandes em ordem sequencial, em velocidades de até terabytes por segundo | Atender arquivos de todos os tamanhos em ordem sequencial e aleatória, em velocidades de até terabytes por segundo | Atender arquivos de todos os tamanhos em ordem sequencial e aleatória, em velocidades de até dois dígitos de gigabytes por segundo |
Preço por terabyte | $ | $$ | $$$$$ |
DESEMPENHO ESCALÁVEL, EFICIENTE EM TERMOS DE CUSTOS E CONVERGENTE
Projetados para entregar desempenho e capacidade de expansão, além de NAS de expansão horizontal, nossos sistemas de armazenamento usam sistemas líderes de arquivos paralelos e não exigem licenciamento baseado em capacidade do sistema de arquivos. O HPE Pointnext oferece suporte para todo o sistema de armazenamento, hardware e software.
| | Armazenamento de sistema de arquivos paralelos HPE | Sistema de armazenamento Cray ClusterStor E1000 |
|---|---|---|
Sistema de arquivos paralelos | IBM Spectrum Scale Erasure Code Edition | Lustre |
Geralmente, associado a | Clusters de sistemas HPE Apollo ou servidores de rack HPE ProLiant DL com adaptadores HPE IB HDR/Ethernet 200Gb | Supercomputadores HPE Cray EX ou clusters grandes de sistemas HPE Apollo e servidores HPE ProLiant DL |
Número de nós de computação | 10s a apenas 100s | Diversos 100s a 1.000s |
Tipo de nós de computação | GPU e/ou CPU | GPU e/ou CPU |
Conectado a | InfiniBand HDR ou 100/200 GbE | HPE Slingshot ou InfiniBand HDR ou 100/200 GbE |
Conjunto de recursos de armazenamento de nível empresarial | Abrangente | Básico |
Suporte a protocolo | POSIX, NFS, SMB, HDFS, Object, NVIDIA GPUDirect Storage (GDS) | POSIX, NVIDIA GPUDirect Storage (GDS) |
Expansão horizontal geralmente em | Terabytes (a partir de 27 TB) | Petabytes (a partir de um PB) |
Adequado para HPC e IA em | Fabricação, saúde e ciências da vida, serviços financeiros, alta tecnologia, farmácia, telecomunicações, varejo e para diretórios de usuários em organizações listadas na coluna à direita | Laboratórios de pesquisa e universidades, agências de inteligência e defesa, agências espaciais, pesquisa climática, previsão meteorológica e geociências, incluindo óleo e gás |
Soluções de armazenamento paralelo para a nova era
Não importa se você prefere o IBM Spectrum ou o Lustre, nós temos o sistema de armazenamento paralelo certo para você. E com a estrutura de gerenciamento de dados (DMF) V7 HPE, você pode mover arquivos entre eles ou fora deles para proteção de dados ou propósitos de arquivamento de longo prazo.
+ mostrar mais
Esse sistema de armazenamento integra o Lustre, o sistema líder de arquivos paralelos para casos de uso científicos e federais. É ideal para associação a HPE Slingshot, InfiniBand HDR e 100/200 GbE e a supercomputadores HPC Cray EX e grandes clusters de sistemas HPE Apollo ou servidores de rack HPE ProLiant DL que executam cargas de trabalho de modelagem e simulação, IA ou análise de dados de alto desempenho. A HPE Pointnext Services dá suporte a hardware e software.
Esse sistema de armazenamento integra o IBM Spectrum Scale, o sistema líder de arquivos paralelos para empresas. É ideal para associação a InfiniBand HDR e 100/200 GbE e a clusters de sistemas HPE Apollo ou servidores de rack HPE ProLiant DL que executam cargas de trabalho de modelagem e simulação, IA ou análise de dados de alto desempenho. A HPE Pointnext Services dá suporte a hardware e software. Os servidores de armazenamento são os servidores de rack HPE ProLiant DL eficientes em termos de custos.
Otimize os recursos de armazenamento de HPC habilitando uma arquitetura de gerenciamento de armazenamento hierárquica e em camadas. A estrutura de gerenciamento de dados da HPE otimiza a utilização de recursos de armazenamento para reduzir o TCO e agiliza os fluxos de trabalho de dados com movimentação de dados automatizada e comprovada por toda a hierarquia de armazenamento. Agora com suporte nativo a IBM Spectrum Scale, além de Lustre e HPE XFS.