26/09/2024 - Panne électrique globale

Résumé

Le datacenter AD28-CHA1 présent à Lucé (proche de Chartres), s’est retrouvé hors réseau électrique durant l’après-midi du 26/09/2024 suite à une coupure globale survenue sur le réseau électrique RTE sur une ligne 225 000 volts.

Malgré la relance des services grâce aux groupes de secours, les opérateurs étaient également impactés. La coupure a été totale, les réseaux FTTO ainsi que 4/5G étaient totalement coupés.

Impact

Indisponibilités des services exposés à travers le Cloud du Coeur entre 14h02 et 17h29.

Timeline

  • [26/09/2024 - 14h02] : Début de l’incident (la sonde Uptime Kuma remonte l’alerte) - Coupure franche sur une ligne 225 000 volts sur le réseau RTE.
  • [26/09/2024 - 14h10] : Début des investigations
  • [26/09/2024 - 14h25] : Intervention sur site et constatation de la coupure totale du réseau électrique (EDF/Synelva)
  • [26/09/2024 - 14h28] : Tentative de contact de Synelva ainsi qu’EDF pour comprendre la situation, contact impossible suite à la coupure du réseau 4/5G. Idem pour la communication nationale.
  • [26/09/2024 - 14h30] : Le groupe électrogène a démarré et a repris le relais. Les machines se rallument progressivement.
  • [26/09/2024 - 15h00] : Le technicien se rend sur site de Synelva pour comprendre la situation.
  • [26/09/2024 - 15h20] : Retour au datacenter, constat que toutes les machines étaient joignables mais les opérateurs n’étaient pas opérationnels.
  • [26/09/2024 - 17h29] : Retour des 2 alimentations sur les sites des opérateurs, le réseau remonte progressivement, les services reviennent un à un.
  • [26/09/2024 - 17h35] : Tous les services sont de nouveau opérationnels. Contact des différents owners de services via e-mail, Teams.
  • [26/09/2024 - 17h39] : Fin de l’incident

Root Cause(s)

La cause racine est une avarie matérielle sur la ligne 225 000 volts alimentant les opérateurs présents sur site :

  • EDF
  • Synelva

Il s’agit de la ligne Chaunay – Dambron, donc entre l’agglo chartraine et la Beauce.

L’alimentation de tout le département a été impacté.