Incident de climatisation à Equinix St-Denis du 19/08/09
Un incident de climatisation s’est produit sur le site d’Equinix de Saint-Denis dans la fin d’après-midi du 19 août 2009.
D’après certaines sources non confirmées, un premier équipement d’Equinix serait tombé en panne à 16h, mais c’est à 17h que nos équipes se sont rendues compte d’une température supérieure à la normale dans les salles.
Nous l’avons aussitôt signalé officiellement, par voie écrite, à Equinix.
À propos de cette panne sur la liste de diffusion FRnOG
http://www.mail-archive.com/frnog@frnog.org/msg06766.html
Durant la panne
La température est montée jusqu’à 38°C à 23h30. À ce moment-là, Equinix a enfin ouvert un ticket destiné à tous les clients impactés « nous informant de l’ouverture d’un incident report dû à l’augmentation intempestive des températures dans les salles clients du 2ème étage du site Saint-Denis EQUINIX ».
Nos techniciens étant sur place, nous avons pu intervenir sur les quelques grappes RAID passées en défaut et les serveurs dédiés tombés. Certains d’entre eux n’ont pas voulu repartir tout de suite à cause de la chaleur excessive.
Nos équipes ont donc travaillé sans relâche pendant toute la nuit afin d’assurer une continuité de service maximale.
La température, après des pics allant jusqu’à 41°C, a commencé seulement à redevenir acceptable aux alentours de 6h du matin mais était encore à approximativement 26°C à 8h.
À 7h38, soit approximativement 8h après leur première communication et plus de 14h après notre premier mail, Equinix nous informe que « les 2 équipes d’intervention sont toujours sur site pour réparer les groupes froids défectueux », qu’ils ont « parallèlement rajouté un groupe supplémentaire pour résoudre le problème au plus vite » et qu’ils nous « communiqueront une nouvelle mise à jour dés que possible ».
Dès 9h la température n’était plus que de quelques degrés supérieure à la normale et elle est à 10h stabilisée à une température quasiment habituelle.
Pour conclure
SD-France.com suppose, sans en avoir la moindre confirmation officielle, que l’équipe d’Equinix n’a pas su prendre dans les délais les plus rigoureux les meilleures décisions qui s’imposaient étant donnée l’absence de certains responsables techniques.
Quoi qu’il en soit, il ne s’agit pas du premier incident sérieux qui se produit avec Equinix Saint-Denis et notre vision du « No-compromises datacentres » commence fortement à se dégrader.
En ce qui concerne ce dernier incident, au-delà de la panne technique critique, ce qui nous a le plus déçu est le manque indiscutable de communication, de transparence et de réactivité de nos interlocuteurs chez Equinix.
