Gestion des espaces de stockage

Gestion des espaces de stockage

Article mis en ligne le 17 avril 2019
dernière modification le 18 avril 2019

Gestion des espaces de stockage

Gestion des espaces de stockage 

NFS ($HOME)


Votre home directory contient les programmes que vous avez compilé vous-mêmes, ainsi que différents fichiers de configuration

Conseils d’utilisation :

  • Votre quota s’affiche automatiquement à chaque connexion sur le supercalculateur : Lisez les messages !
  • Afficher son quota lorsqu’on est connecté :

Lustre (/tmpdir)


Lors de campagnes de calcul volumineuses en terme de quantité de données générées, il est important d’être attentif à l’espace que vous occupez sur le tmpdir et de mettre en place une procédure de suppression des fichiers inutiles à la fin de vos traitements.

Conseil d’utilisation :

  • Afficher son quota
  • Lister les fichiers qui n’ont pas été utilisés depuis plus de 100 jours
  • Lister la taille de chaque fichier qui n’a pas été utilisé depuis plus de 100 jours avec le total au début
  • Supprimer les fichiers qui n’ont pas été utilisés depuis plus de 100 jours
  • Supprimer les données inutiles

Multiplier le nombre de fichiers présents sur cet espace rend ensuite leurs suppressions délicates. Cela engendre, au moment de la suppression, un stress sur le système de fichier qui peut pénaliser les autres utilisateurs.

GPFS (/gpfs/work)


Avant tout dépot sur l’espace GPFS, il est conseillé de faire le trie entre les données à conserver et les données temporaires ou intermédiaires

Conseil d’utillisation :

  • Afficher son quota lorsqu’on est connecté (Ce fichier est mis à jour 2 fois par jour à 7H00 et 13H00)
  • Faire une archive afin de limiter le nombre de fichiers
  • Supprimer les données inutiles

Multiplier le nombre de fichiers présents sur cet espace rend ensuite leurs suppressions délicates. Cela engendre, au moment de la suppression, un stress sur le système de fichier qui peut pénaliser les autres utilisateurs.