Développement d'un scan parallèle optimisé d'un système de fichiers

Mathématiques, information  scientifique, logiciel Stage - Bac+4/+5 - Développement d'un scan parallèle optimisé d'un système de fichiers - H/F Le CEA conçoit et maintient des systèmes de fichiers haute performance pour le stockage de ses supercalculateurs. Ces systèmes de fichiers contiennent jusqu'à plusieurs pétaoctets de données réparties dans plusieurs dizaines de millions de fichiers. Afin de manipuler de telles quantités de données, le CEA développe un outil de gestion de politique : Robinhood. Cet outil permet d'exécuter des politiques de migration, de suppression ou encore d'archivage massif de fichiers et permet le suivi du remplissage des serveurs. L'objectif du stage est de développer, au sein de Robinhood, des fonctionnalités dans un backend permettant de réaliser un scan bas niveau optimisé sur les serveurs Lustre. Ce backend scanne les métadonnées du système de fichiers en accédant directement aux informations sur les disques des serveurs. Les missions confiées lors de ce stage seront de développer un mécanisme permettant de retrouver le chemin des fichiers, d'améliorer les performances en utilisant des entrées/sorties asynchrones et enfin d'évaluer les performances de ces fonctionnalités. Conformément aux engagements pris par le CEA en faveur de l'intégration des personnes handicapées, cet emploi est ouvert à toutes et à tous. Le CEA propose des aménagements et/ou des possibilités d'organisation pour l’inclusion des travailleurs handicapés. Participant à la protection nationale, une enquête administrative est réalisée pour tous les collaborateurs du CEA afin d'assurer l'intégrité et la sécurité de la nation. Autonomie, rédaction, capacité d’adaptation, esprit d’initiative, anglais Programmation en C, programmation parallèle, systèmes Linux, Git Bac+4/+5