L’économie 10x de Panasas empêche NetApp du déploiement du stockage HPC

Le Molecular Horizons Institute de l’Université australienne de Wollongong (UoW), un leader mondial de la microscopie électronique cryogénique, a déployé 1,2 Po de Panasas NAS évolutif soutenir calcul haute performance (HPC).

Le partenariat de cinq ans verra le matériel de stockage Panasas remplacer l’équipement NetApp qui était arrivé en fin de vie. Mais Panasas a également été choisi pour son soutien et son expertise dans les sciences de la vie ainsi que coût par To.

L’expertise de Molecular Horizons en microscopie électronique cryogénique (Cryo-EM) le voit travailler avec des partenaires du monde entier. Il est basé sur des capacités qui permettent aux chercheurs d’étudier des images haute résolution d’échantillons congelés de virus, de structures cellulaires et de protéines.

Les ensembles de données brutes peuvent aller d’environ 5 To à 40 To à partir d’équipements d’imagerie fonctionnant pendant 80 % de l’année, fonctionnant 24h/24 et 7j/7 et prenant entre 5 000 et 10 000 images du même échantillon pour fournir des visualisations aux chercheurs du monde entier.

Cela équivaut à de grandes réserves de données qui s’étendent actuellement sur plusieurs centaines de To, bien que les partenaires migrent leurs propres données après six mois sur le stockage UoW.

L’infrastructure de stockage en masse d’UoW avait été fournie par NetApp. il avait atteint fin de vie et UoW cherchait ailleurs, a déclaré James Bouwer, directeur de Cryo-EM chez Molecular Horizons.

Panasas avait déjà une expertise en sciences de la vie, a déclaré Bouwer, contrairement à NetApp, et avait un énorme différentiel de coût par To, Panasas offrant 1,2 Po pour le même prix que NetApp proposait 100 To.

“Pour le prix que nous avons payé – nous avons également examiné NetApp – nous aurions probablement pu obtenir 100 To de ce que nous avons dépensé”, a déclaré Bouwer. « Nous avons 1,2 PB et un partenaire. Je pense que les calculs sont assez clairs.

« Nous avons été confrontés à la perspective d’un manque de soutien de NetApp. Ils ont dit : « Nous allons livrer le système, puis il est à vous, prenez-en soin ». Panasas possède une expertise dans les sciences de la vie et nous avons travaillé en étroite collaboration avec eux », a-t-il déclaré.

« Panasas a expédié tout le matériel, nous avons travaillé avec eux et nous l’avons construit nous-mêmes à cause de Covid, mais [we’re] pris en charge à distance par eux », a-t-il ajouté.

Molecular Horizons a déployé 1,2 Po de Panasas ActiveStor stockage évolutif, qui exécute le système de fichiers parallèle PanFS. Il fournit plusieurs niveaux de stockage basés sur État solide NVMe et capacité du disque en rotation.

Ce déploiement est actuellement en phase de test, Panasas fournissant une aide précieuse pour l’architecture de ce que Bouwer décrit comme un « ensemble très complexe de flux de travail ».

Il a ajouté : « Nous ne travaillons pas avec le département informatique de l’université parce qu’ils ne comprennent pas ce que nous faisons, mais nous avons un partenaire qui le fait.

Quels autres avantages Molecular Horizons attend-il du déménagement à Panasas ? “Nous allons obtenir un accès très rapide aux fichiers, à la couche active”, a déclaré Bouwer.

L’accélération dynamique des données de Panasas a ajouté une hiérarchisation basée sur la taille du fichier à son PanFS NAS évolutif l’année dernière. Il s’agit d’une initiative visant à fournir aux clients un stockage adapté à une grande variété de HPC et d’intelligence artificielle/apprentissage automatique (IA/ML) en exploitant la vitesse du SSD pour les petits fichiers et le débit massé des Disque dur pour les gros fichiers.

Dynamic Data Acceleration classe les données sur différents supports au sein du système de stockage, mais pas selon les caractéristiques d’utilisation. Sa hiérarchisation par taille de fichier revendique un avantage de performances 2x en termes de GBps par rapport aux rivaux du système de fichiers BeeGFS, Lustre et IBM GPFS/Échelle de spectre.