Proton victime d’une panne mondiale après une surchauffe dans un datacenter
Une défaillance totale du refroidissement dans le datacenter de Francfort de Proton a perturbé ses services dans la nuit du 26 au 27 août. La température a grimpé de 30°C à 60°C en une vingtaine de minutes, compliquant le basculement vers les infrastructures de secours.
Proton a subi une panne mondiale de ses services à la suite d’une défaillance du système de refroidissement dans son datacenter de Francfort. Sur sa page de statut, l’entreprise indique avoir commencé à enquêter peu après minuit et avoir identifié l’origine de l’incident à 00h38.
Andy Yen, CEO de Proton, a ensuite pris la parole sur X pour détailler les circonstances de la panne. Selon le dirigeant, la température de l’air à l’intérieur de l’installation est passée d’environ 30°C à un pic de 60°C en une vingtaine de minutes. Sous l’effet de la surchauffe, les serveurs ont commencé à tomber en panne de manière aléatoire. «C’est vraiment effrayant de voir à quelle vitesse les températures peuvent augmenter dans un datacenter à haute puissance en cas de défaillance totale du refroidissement», a-t-il commenté.
Le caractère aléatoire de ces défaillances a perturbé le failover automatique. Il explique que les systèmes ne parvenaient plus à déterminer si le site était complètement indisponible ou non. Les équipes ont donc dû basculer manuellement vers les sites de secours, ce qui a rallongé le temps de récupération.
Proton a également dû choisir entre rétablir le refroidissement et éteindre l’ensemble des équipements pour protéger le matériel. Andy Yen a précisé que «ce mode de défaillance nous était en fait connu, mais les mesures d’atténuation n’avaient pas été prioritaires, car ce scénario était jugé extrêmement improbable». Il a ajouté que les systèmes de refroidissement disposent normalement d’une forte redondance.
Dans un commentaire publié sur Reddit, l’équipe de Proton reconnaît avoir mis plus de temps qu’elle ne l’aurait souhaité à actualiser sa page de statut, tout en précisant que ses ingénieurs avaient connaissance des perturbations en temps réel et avaient commencé à travailler à leur résolution dès leur apparition.
Les services ont ensuite été progressivement rétablis. À 02h27, Proton indiquait que la panne était largement résolue, même si certains utilisateurs pouvaient encore rencontrer des retards dans l’envoi et la réception des e-mails ainsi que dans les notifications. L’entreprise a précisé qu’«aucune donnée n’a été perdue à la suite de cette panne».
L’actualité IT en Suisse et à l’international, avec un focus sur la Suisse romande, directement dans votre boîte mail > Inscrivez-vous à la newsletter d’ICTjournal, envoyée du lundi au vendredi!
