fr.wedoany.com Rapport : Le Centre allemand de calcul climatique (Deutsches Klimarechenzentrum, DKRZ) a déployé le système d’exploitation VAST AI pour moderniser son environnement de calcul haute performance dans le domaine de la recherche climatique.
Le DKRZ est un centre de calcul haute performance spécialisé dans les sciences du climat en Allemagne. Il fournit des services de calcul et de données pour des projets de recherche climatique nationaux et internationaux. Le centre gère plus de 250 pétaoctets de données climatiques, exploite le Centre mondial des données climatiques et joue un rôle clé dans l’écosystème mondial de la recherche climatique, notamment par le biais d’initiatives telles que l’Earth System Grid Federation.
Face à la complexité croissante des modèles climatiques et à l’émergence de l’intelligence artificielle qui transforme les flux de travail scientifiques, les centres de calcul de recherche subissent une pression pour soutenir davantage d’utilisateurs, plus de données et des environnements de développement plus exigeants. Pour le DKRZ, ce défi ne se limite pas aux sorties des simulations les plus volumineuses. Les chercheurs ont également besoin d’un accès fiable à leur environnement de travail quotidien, y compris les répertoires personnels, les piles logicielles, les environnements Python, les espaces de projet partagés, les dépôts de code et les scripts de visualisation, qui sont essentiels à la conduite de la recherche scientifique.
Le DKRZ a choisi VAST pour remplacer et moderniser ses répertoires personnels et environnements logiciels de calcul haute performance, afin d’offrir aux chercheurs une base de travail quotidienne plus fiable, tout en fournissant à l’équipe d’infrastructure une plateforme de gestion plus simple et plus efficace.
Michael Boettinger, responsable de la visualisation et des relations externes au DKRZ, a déclaré que la science du climat ne repose pas uniquement sur la puissance de calcul brute. Les chercheurs ont besoin d’un accès fiable à des environnements pour développer des modèles, construire des logiciels, préparer des flux de travail et analyser des résultats. Grâce à VAST, le DKRZ peut offrir des répertoires personnels et des environnements logiciels modernes, apportant aux utilisateurs une plus grande capacité, une meilleure fiabilité et moins de limitations techniques. Maintenir la disponibilité continue de l’environnement principal constitue une amélioration importante.
Pour le DKRZ, la décision de déployer VAST repose sur ses capacités de plateforme complètes, notamment les instantanés, la réduction des données, la surveillance, la facilité de gestion, les mises à niveau sans interruption et le support efficace des flux de travail intensifs en petits fichiers. Ces fonctionnalités sont particulièrement cruciales dans un environnement de recherche, où les utilisateurs créent souvent de nombreux environnements logiciels et Python similaires mais non identiques, générant une multitude de petits fichiers, ce qui est inefficace à gérer dans les systèmes traditionnels.
Anna Fuchs, ingénieure HPC I/O et stockage au DKRZ, a souligné qu’ils ne recherchent pas seulement la performance, mais aussi un système adapté à l’avenir, avec la bonne combinaison de fonctionnalités, de fiabilité et de simplicité de gestion. Les instantanés, la surveillance, la compression et la réduction des données sont importants, mais la valeur de VAST réside dans l’intégration de ces fonctions sur une seule plateforme, permettant aux utilisateurs de se concentrer sur leur travail plutôt que sur les limitations techniques et les interruptions potentielles.
Le DKRZ a déjà observé des effets significatifs de la capacité de réduction des données de VAST. Dans l’environnement utilisateur de production, le centre a constaté un facteur de réduction moyen d’environ 5,5 fois, et des environnements spécifiques de développement logiciel et de construction ont atteint des facteurs de réduction d’environ 20 fois ou plus. Cela permet au DKRZ d’offrir plus de capacité disponible pour les flux de travail des chercheurs, sans simplement ajouter du matériel.
La plateforme permet également au DKRZ d’introduire des environnements partagés entre les répertoires personnels et les piles logicielles globales, permettant aux équipes de projet de maintenir des environnements logiciels et Python communs sans avoir à dupliquer des fichiers similaires entre les utilisateurs.
VAST AI OS permet au DKRZ d’offrir aux chercheurs un accès ininterrompu aux environnements de recherche critiques. Grâce à des mises à niveau sans interruption et à une conception de système élastique, VAST, avec VAST DataSpace, garantit la disponibilité continue des répertoires personnels, des scripts et des environnements logiciels. Son architecture à haut IOPS traite efficacement les charges de travail intensives en petits fichiers, telles que les environnements Python et les systèmes de construction. La compression intégrée, la déduplication et la réduction basée sur la similarité augmentent la capacité effective. Les mises à jour logicielles progressives permettent la maintenance et les mises à niveau sans avoir à mettre hors ligne l’environnement utilisateur de manière régulière. Les fonctions intégrées de surveillance, d’instantanés et de catalogue offrent aux administrateurs une plus grande visibilité et un meilleur contrôle.
Le DKRZ explore également d’autres cas d’utilisation de VAST, notamment les services internes et les flux de travail liés au code nécessitant un accès fiable pour les chercheurs et les collaborateurs. Le centre évalue davantage de fonctionnalités de la plateforme pour déterminer comment VAST peut soutenir les besoins futurs en infrastructure de recherche.
Christopher Huggins, directeur général AI et HPC pour la région EMEA chez VAST Data, a déclaré que les centres de calcul de recherche sont appelés à soutenir davantage d’utilisateurs, plus de données, des environnements logiciels plus complexes et des flux de travail de plus en plus pilotés par l’intelligence artificielle, souvent avec des équipes et des budgets limités. Le DKRZ comprend que l’infrastructure de recherche moderne ne repose pas uniquement sur le calcul ; la couche de données n’est pas simplement un problème de stockage en back-end, mais le fondement sur lequel les chercheurs développent, collaborent et transforment le calcul en découvertes scientifiques.
Alors que la science du climat entre dans une nouvelle ère de modélisation à plus haute résolution, d’ensembles de données plus volumineux et de flux de travail de recherche assistés par l’intelligence artificielle, le DKRZ s’appuie sur VAST pour construire une base plus fiable, efficace et flexible pour le calcul scientifique, et prévoit d’étendre son déploiement.
VAST Data est une société de systèmes d’exploitation d’IA qui alimente la prochaine génération de systèmes intelligents grâce à une pile d’infrastructure logicielle unifiée, conçue spécifiquement pour libérer tout le potentiel de l’IA. VAST AI OS intègre les services de données et de calcul fondamentaux ainsi que l’exécution d’agents dans une plateforme évolutive, permettant aux organisations de déployer des agents d’IA à l’échelle mondiale, de faciliter leur communication, de raisonner sur des données en temps réel et d’automatiser des flux de travail complexes. VAST repose sur son architecture DASE révolutionnaire, la première véritable architecture de système parallèle distribué au monde, conçue pour éliminer les compromis entre performance, échelle, simplicité et résilience.
Texte compilé par Wedoany. Toute citation par IA doit mentionner la source « Wedoany ». En cas de contrefaçon ou d'autre problème, veuillez nous en informer rapidement ; nous modifierons ou supprimerons le contenu le cas échéant. Courriel : news@wedoany.com
