19/06/2026
Concernant la migration du groupe de disques il reste 370 k fichiers et 1.4 To à migrer.
Nous prévoyons une reprise partielle de la production sur Olympe le Jeudi 25 Juin 2026.
Une partie des noeuds de calculs d'Olympe ne seront pas accessibles afin de soulager l'espace /tmpdir,
mais aussi pour des raisons d'économie d'énergie.
L'objectif pour le 25 Juin est d'avoir remplacé tous les disques actuellement défaillants.
Ceci permettra de ramener l'espace /tmpdir à un état nominal face à la perte de disques, et donc sa résilience par rapport à la perte de données.
Cependant, à cette date, l'espace /tmpdir n'aura pas retrouvé son état nominal concernant la résilience par rapport à l'accès aux données.
Également, l'espace /tmpdir n'aura pas retrouvé sa performance nominale en écriture et lecture.
Nous réfléchissons avec notre partenaire Bull à des solutions d’atténuations.
L'ensemble des projets CALMIP actifs en 2026 ont été créé sur Kairos.
Nous demandons aux projets qui ont la possibilité technique d'utiliser Kairos (chaine applicative disponible sur Kairos),
ne pas lancer des calculs sur Olympe à partir du 25 Juin, afin de soulager son /tmpdir.
*****
17/06/2026
Les dernières 24h ont été profitables.
Il reste environ 800 00 fichiers à migrer et 2,6 To.
Pour aujourd'hui nous conservons les accès aux frontales et aux espaces fichiers.
Cependant afin de continuer à préserver l'espace /tmpdir et la performance de la migration en cours il n'est pas possible de lancer des calculs pour aujourd'hui.
*******************
16/06/2026
La migration des données se poursuit.
Les accès aux frontales et aux espaces fichiers sont ré-ouverts.
Afin de continuer à préserver l'espace /tmpdir et la performance de la migration en cours il ne sera pas possible de lancer des calculs.
Equipe CALMIP
*************
15/06/2026
Bonjour,
Nous travaillons actuellement avec les équipes Bull à la stabilisation du système de stockage qui porte l'espace fichier /tmpdir/
Notre objectif premier est la sécurisation des données du /tmpdir.
Nous allons essayer de donner un point journalier sur l'avancement de cette tâche et les conséquences sur l'utilisation d'Olympe.
Actuellement nous sommes dans une phase de migration d'un volume RAID (groupe de 10 disques) en vue de son décommissionnement.
Ceci permettra de récupérer des disques qui serviront à remplacer un certain nombre de disques actuellement HS.
Pour aujourd'hui l'accès aux frontales d'Olympe reste fermé.
Bien Cordialement
Equipe CALMIP
*******************English version.
Dear Users,
We're currently working on stabilising /tmpdir storage infrastructure.
Our aim is to secure data.
We are migrating some data in order to have a RAID group (10 Drives) decommishionned.
This will alow us to replace other failed Drives.
For today access to Olympe is denied.
We will try to give daily update on the situation.
CALMIP's Team.
******
****
12/06/2026
Afin de préserver l'espace /tmpdir nous avons fermé les accès à Olympe pour le WE et stoppé les jobs en cours.
Nous ferons le point Lundi 15 Juin et nous évaluerons les modalités d'une ré-ouverture progressive au système.
Nous sommes désolés des problèmes d'instabilités rencontrés avec Olympe.
Nous continuons les créations de projets sur Kairos.
En vous remerciant pour votre compréhension.
Bien Cordialement
*******
11/06/2026
Une charge importante sur le système de fichier /tmpdir en entrainé des perturbation sur cette espace.
Le système est redevenu opérationnel, la maintenance entamée ce matin est terminée.
Merci de votre compréhension.
************
L'accès à l'espace /tmpdir a été rétabli.
Pendant le WE la connexion entre le système de fichier Lustre (/tmpdir) et les noeuds de calculs de Olympe
a été interrompue. Ceci a rendu l'espace /tmpdir inaccessible.
Un des serveurs de stockage participant au système de fichier est actuellement offline.
Ceci peut avoir un impact (évalué à faible ou moyen) sur la performance des lecture/écriture, mais pas sur l'intégrité des données.
Nous travaillons actuellement avec les équipes de Bull sur la remise en production de ce serveur de stockage.
Nous travaillons également sur les mesures permettant de contribuer à la stabilisation du système de fichier qui porte l'espace /tmpdir.
Pour rappel les matériels de stockage ont été mis en production mi-2018.
Nous sommes désolé pour cet incident et nous vous remercions pour votre compréhension.
Bien Cordialement
*************************
Bonjour à toutes et tous,
Nous avons un nouvel incident en cours sur l'espace /tmpdir d'Olympe.
L'accès aux données est très perturbés.
A priori, cet incident ne devrait pas engendrer de perte de données, au moins pour celles qui résidaient sur le /tmpdir avant ce nouvel incident.
Il se peut que des données en cours d'écriture soient impactées.
Nous travaillons activement avec les équipes de Bull à la résolution du problème et aux solutions de stabilisation de la disponibilité du /tmpdir dans la durée.
Désolé pour ce nouvel désagrément et merci pour votre patience et votre compréhension.
Bien Cordialement
***** 27/05/2028*******
Chères utilisatrices, Chers utilisateurs,
Le système de stockage /tmpdir est de nouveau opérationnel.
Les connexions au Supercalculateur Olympe sont réouvertes.
Le système de stockage a eu un fonctionnement dégradé depuis hier en fin de journée.
L'accès aux données a été en conséquence très perturbés.
Le système de stockage a été remis en fonctionnement nominal grâce à l'aide des équipes Bull.
A priori, cet incident n'a pas engendré de perte de données, au moins pour celles qui résidaient sur le /tmpdir avant cet incident.
Il se peut que des données qui étaient en cours d'écriture pendant l'incident aient été impactées.
Nous sommes désolés pour le désagrément et nous vous remercions de votre compréhension.
Bien Cordialement
Equipe Calmip
**********
Bonjour,
Nous avons un potentiel problème en cours sur Olympe (/tmpdir).
Nous revenons vers vous rapidement.
merci de votre compréhension.
Bien Cordialement