|
> > Ateliers > Atelier 6
Atelier 06 de 16h00 à 18h00
Stockage HPC : de nouveaux paradigmes pour s’attaquer aux défis des architectures Exascale
Présidé par Philippe Deniel, chef du Laboratoire architecture du stockage et des systèmes, CEA DAM
Prise en compte du stockage dans lordonnancement des tāches avec Slurm
Par Iakovos Panourgia, HPC Applications Consultant, EPCC, Adrian Jackson, Senior Researc Fellow, EPCC, et Darren J. White, Applications Consultant, UEDIN
La gestion d’énormes volumes de données est devenue un sujet majeur dans le domaine du Calcul Haute Performance. Le besoin de stocker, parcourir analyser et sauvegarder les données atteint les limites des technologies actuelles et des systèmes de stockage.
Dans cette présentation, nous décrirons l’état de l’art de la plateforme Sage2 et nos travaux pour l’intégrer dans l’ordonnancement des travaux et permettre aux utilisateurs de se servir de cette plateforme facilement et efficacement.
La plateforme Sage2 est une plateforme de stockage de donnée unifiée for l’IA, l’apprentissage supervisé, le Big Data et le HPC. Son architecture reflète le besoin de réduire les mouvements de données afin d’optimiser la consommation énergétique aussi bien que l’exploitation de nouvelles technologies telles que les mémoires non volatiles.
Nos travaux permettent à l’ordonnanceur Slurm de travailler en tandem avec la plateforme Sage2, cela inclut l’implémentation d’un plugin similaire à un burst buffer qui permet à Sage2 de copier des objets entre les niveaux de stockage de données tandis que les travaux sont en train d’attendre leur exécution en machine, permettant ainsi un gain de throughput.
|
Biographie : |
|
Biographie : |
Inscrivez-vous dès à présent et obtenez votre badge en cliquant ici
- Le Forum TERATEC est strictement réservé aux professionnels.
- Participation gratuite aux conférences et aux ateliers.
- L'enregistrement en ligne est obligatoire.
|
|