Licence d’utilisation électronique HPE Data Management Framework 1 Po Au‑delà de 101 Po ‑ Abonnement de 1 an

Les applications IA/HPC sont riches en données qui doivent être protégées

HPE Data Management Framework 7 crée des versions immuables des fichiers et enregistre des snapshots de l’état du système de fichiers en reflétant l’espace de nom. Gérée via les règles de l’administrateur, la reprise peut être personnalisée pour un retour sur investissement très bas à partir du disque, pour un coût moindre à partir de bande, et/ou à partir d’emplacements distants via S3/cloud.

La perte d’un système de fichiers en raison d’une défaillance a des répercussions catastrophiques sur la disponibilité du cluster de calcul haute performance. Même lorsqu'un système de fichiers dispose d'outils de réparation, la complexité et le temps nécessaires pour réparer un système de fichiers défectueux peuvent prolonger l’interruption de calcul au-delà des niveaux de service acceptables.

Jusqu’à présent, la protection des systèmes de fichiers et des données était un investissement coûteux avec de considérables inconvénients, notamment le manque de fenêtres de sauvegarde, des utilitaires de sauvegarde sous-optimisés, conçus pour les systèmes de fichiers parallèles de la taille d’un Po et l’impact négatif sur les performances de l’analyse des métadonnées du système de fichiers.

L’émergence de Exascale Computing remet en question les limites d'évolutivité du stockage HPC hérité

HPE Data Management Framework 7 gère l’espace libre du stockage en déplaçant automatiquement les fichiers obsolètes hors du stockage haute performance, et en créant un espace de stockage sous-jacent plus grand à l’intérieur. Les administrateurs gèrent facilement les paramètres de stratégie, et éliminent la nécessité de mesures de force brute.

Le défi est peut-être ressenti avec plus d'acuité par les administrateurs de stockage, qui luttent pour conserver suffisamment d'espace libre dans un stockage hautes performances coûteux tandis que les utilisateurs inondent indépendamment le système de fichiers de nouveaux fichiers. L’augmentation du budget de stockage et/ou la suppression des fichiers des utilisateurs ne sont pas des solutions pratiques.

Le volume et la diversité des données exigés par les applications HPC/IA ont favorisé la croissance de ce stockage « indompté » qui alimente les budgets HPC. Au même moment, les architectures des systèmes de fichiers parallèles traditionnels luttent sous le poids de la croissance implacable du nombre de fichiers et d’inodes.

Finalement, les administrateurs doivent travailler avec les utilisateurs pour supprimer les fichiers inutilisés du système de fichiers afin de garantir que les performances des métadonnées ne sont pas compromises. Lorsque les vieux fichiers sont marqués pour suppression, aucune donnée n’a besoin d’être déplacée car HPE DMF7 protège déjà les fichiers et les métadonnées dans un stockage back-end moins coûteux.

Les environnements de stockage IA/HPC sont variés et les données doivent être portables

HPE Data Management Framework 7 migre automatiquement les fichiers vers le bas de la hiérarchie de l’espace de stockage, sans aucune intervention de l’administrateur, et les rappelle vers un stockage hautes performances à la demande. Il utilise des moteurs de transfert de données parallèles et le réseau haut débit pour déplacer les fichiers à une vitesse supérieure par rapport aux utilitaires des ordinateurs de bureau standard.

La gestion du mouvement des données IA/HPC est une tâche intimidante. Les outils ne sont pas faciles à utiliser, ils ne s’adaptent pas très bien, la bande passante du tuyau du réseau est limitée et les utilisateurs peuvent ne pas posséder les compétences nécessaires. Lorsqu’un déplacement aisé des données n’est pas possible et que la motivation est faible, la solution par défaut consiste à les laisser en place.

Les espaces de stockage sont optimisés en matière de performances, de fonctionnalité et de coûts, et les données se trouvent toujours temporairement entre ces différents niveaux. Les workflows des applications exigent que les données suivent l’utilisateur et l’application et les administrateurs sont continuellement contraints de gérer les coûts de stockage et de pousser les données vers le bas de la hiérarchie.

La migration technologique est un vecteur courant du mouvement des données et HPE DMF7 est une solution pérenne face à ce risque. Elle automatise la migration des objets back-end provenant de technologies de disque dur/bande de génération plus anciennes et inefficaces vers des générations offrant la densité, la fiabilité et les performances les plus élevées.

Lorsque le système de fichiers doit être mis au rebut, les administrateurs déplacent le système de fichiers et les fichiers sur les appareils back-end HPE DMR7. Une fois leur protection assurée, le système de fichiers peut être placé dans un espace de nom totalement nouveau et les fichiers peuvent être placés dans ce nouvel espace de nom ou être conservés par HPE DMR7.

En réduisant les coûts de stockage HPC, on peut augmenter le budget de calcul

HPE Data Management Framework 7 est la plateforme de gestion de stockage HPC, qui automatise les workflows de données et réduit les coûts de stockage HPC afin que les clients HPC puissent consacrer leurs précieux budgets de projet à la ressource d’infrastructure qui compte le plus.

Le stockage indompté agit comme un obstacle à cet objectif. Le stockage indompté encourage les clients HPC à répliquer les fichiers sur un stockage propriétaire onéreux, à faire évoluer le niveau de stockage le plus cher pour répondre à la croissance des données, et estime qu'il est plus facile de laisser les données en place sur un stockage coûteux que de déplacer des données.

Le principal objectif de HPE DMF7 est de réduire les coûts de stockage. Au lieu d’acheter un stockage plus cher, HPE DMF7 aide les clients HPC en simplifiant la protection, l’adaptation et le déplacement des données à l’aide de coûts de stockage réduits, et en améliorant l’utilisation et les performances des ressources de stockage HPC stratégiques.

La croissance ininterrompue des données HPC et l’orchestration de larges ensembles de données pour l’IA/le machine learning entraînent une augmentation sans précédent des besoins en matière de capacité de stockage. L’adoption du stockage flash à un coût effectif plus élevé qui signifie que la maîtrise des coûts reste l’objectif principal des acheteurs de stockage HPC.