Problème électrique dans l'une de nos salles
Par Kalou le jeudi 2 juillet 2009, 11:31 - Maintenances et Incidents - Lien permanent
Suite à une perte totale de courant dans un datacentre hébergeant une de nos salles serveurs (et en passant, Dailymotion, Skyblog, PixMania...), une partie de la production hébergement est impactée. Nous travaillons actuellement sur le problème pour rétablir le service dans les plus brefs délais.
Nous reviendrons bien sûr sur tous les détails de cet incident dès que nous aurons rétabli le service.
12.20: l'incident électrique est terminé dans la salle 1, les serveurs redémarrent tous automatiquement, mais au nombre de serveurs concernés, le temps de rétablissement maximum pour l'ensemble des clients impactés sera de plusieurs dizaines de minute.
12:50: le processus suit son cours, nous vérifions que les serveurs redémarrent correctement.
15:30: les serveurs sont maintenant tous redémarrés, par contre il en reste quelques uns, ayant besoin d'une vérification fsck, dont nous allons nous occuper.
16:00: nous venons de publier un rapport suite à l'incident http://www.lebardegandi.net/post/2009/07/02/Explication-de-la-panne-qui-a-dure-4-heures


