Étude et évaluation de technologies de stockage éphémère

Mathématiques, information  scientifique, logiciel Stage - Bac+4/+5 - Étude et évaluation de technologies de stockage éphémère - H/F R&D du laboratoire en matière d’ingénierie de la donnée dans un environnement de calcul haute performance. Les supercalculateurs du CEA produisent d’immenses quantités de données (dizaines de péta-octets) à des débits extrêmes (centaines de giga-octets par seconde). Pour cette raison, les systèmes de stockage du CEA sont basés sur Lustre, un système de fichiers open source parallèle et distribué. Afin de concevoir la prochaine génération de plateformes de stockage, le CEA souhaite étudier la possibilité d’allouer dynamiquement des ressources de stockage HPC Lustre le temps de la durée d’un job utilisateur. L’idée est de dédier des ressources de stockage uniquement accessible à un utilisateur (ou un groupe) afin d’en garantir les performances. L’objectif du stage est de proposer et concevoir une architecture système à base de Lustre afin d’allouer dynamiquement des ressources de stockage HPC à la demande d’un job utilisateur. Le(la) stagiaire pourra proposer des architectures reposant sur des technologies de conteneurs Kubernetes ou de fonctionnalités Lustre comme par exemple PCC (Persistent Client Cache), QOS (Quality Of Service) etc. Afin de répondre aux besoins des prochains centres de calculs, il conviendra de regarder si cette architecture répond à l’ensemble de nos critères (pertinence, performance, sécurité etc.) Conformément aux engagements pris par le CEA en faveur de l'intégration des personnes handicapées, cet emploi est ouvert à toutes et à tous. Le CEA propose des aménagements et/ou des possibilités d'organisation pour l’inclusion des travailleurs handicapés. Participant à la protection nationale, une enquête administrative est réalisée pour tous les collaborateurs du CEA afin d'assurer l'intégrité et la sécurité de la nation. Autonomie, rédaction, capacité d’adaptation, esprit d’initiative, anglais Linux, C, Bash, Lustre, Slurm, conteneur, Kubernetes, expérience dans un environnement virtualisé Bac+4/+5