Armazenamento híbrido Orion de 700 PB do supercomputador Frontier com eficácia comprovada

Resource insideHPC publicou detalhes sobre a arquitetura do subsistema de armazenamento do supercomputador Frontier instalado no Oak Ridge National Laboratory (ORNL) do Departamento de Energia dos Estados Unidos. Este complexo lidera a classificação atual do TOP500, demonstrando um desempenho de 1.102 Eflops e um desempenho máximo de 1.685 Eflops.

O sistema de armazenamento Frontier é supostamente chamado de Orion. Consiste em 50 armários de armazenamento com uma capacidade total de armazenamento de aproximadamente 700 PB. Esses dispositivos de armazenamento são distribuídos em um esquema de três camadas, incluindo SSD, HDD e outras soluções não voláteis, com base nas quais o Lustre e o ZFS FS são implantados. Os dados com mais de 90 dias são movidos automaticamente para o arquivo.

Fonte da imagem: ORNL

Um dos níveis, desempenho, combina 5.400 SSDs NVMe, fornecendo uma capacidade de 11,5 PB. As velocidades máximas de leitura e gravação atingem 10 TB/s. IOPS (operações de E/S por segundo) de leitura e gravação aleatórias excede 2 milhões.O segundo nível contém 47.700 discos rígidos (PMRs). Sua capacidade total é de 679 PB. A velocidade máxima de leitura do array é de 4,6 TB / s, a velocidade de gravação é de 5,5 TB / s. O terceiro nível inclui 480 dispositivos NVMe com capacidade total de 10 PB para trabalhar com metadados.

Em geral, a arquitetura corresponde ao que foi originalmente planejado. Agora, no entanto, um porta-voz do ORNL confirmou a correção da abordagem híbrida escolhida para armazenamento de informações, observando que uma das tarefas executadas em um supercomputador gera 80 PB por dia e que ele não gostaria que uma máquina tão poderosa ficasse ociosa devido a armazenamento insuficientemente rápido.