{"id":127,"date":"2021-03-10T17:23:57","date_gmt":"2021-03-10T16:23:57","guid":{"rendered":"https:\/\/wlem.lemnia.net\/le-datacenter-sbg2-dovh-detruit-par-le-feu\/"},"modified":"2022-03-17T12:05:48","modified_gmt":"2022-03-17T11:05:48","slug":"le-datacenter-sbg2-dovh-detruit-par-le-feu","status":"publish","type":"post","link":"https:\/\/wlem.lemnia.net\/le-datacenter-sbg2-dovh-detruit-par-le-feu\/","title":{"rendered":"Le datacenter SBG2 d’OVH d\u00e9truit par le feu."},"content":{"rendered":"\n
\"\"<\/figure>\n\n\n\n

L’incendie s’est d\u00e9clar\u00e9 cette nuit et vers 4h du matin, l’annonce est tomb\u00e9e : SBG2 d\u00e9truit, SBG1 partiellement touch\u00e9, SBG3 et SBG4 intact mais \u00e0 l’arr\u00eat. Pas de bless\u00e9 dans les \u00e9quipes OVH. L’activation des plans de PRA est recommand\u00e9e par OVH.<\/p>\n\n\n\n

Chronologie de l’incident.<\/h2>\n\n\n\n

A 23h42<\/strong>, une t\u00e2che travaux est ouverte<\/a>, indiquant une perturbation dans SBG1. Jusque l\u00e0, rien de bien grave, les \u00e9quipe d’OVH surveillent les datacenter 24\/7 et interviennent rapidement, m\u00eame la nuit.
A 1h22<\/strong>, les \u00e9quipes annonce que 2 salles sont principalement touch\u00e9e, mais n’indiquent pas encore qu’il s’agit d’un incendie : \u00ab\u00a0Plusieurs services sont actuellement impact\u00e9s majoritairement dans les salles 71 et 72 du datacentre de SBG(Strasbourg).\u00a0\u00bb
\u200bA 3h53<\/strong>, l’annonce officielle tombe :<\/p>\n\n\n\n

\u200bNous faisons actuellement face \u00e0 un incident majeur au sein de notre datacentre de Strasbourg, avec un feu d\u00e9clar\u00e9 dans le b\u00e2timent SBG2.
Les pompiers sont intervenus imm\u00e9diatement sur place mais ne sont pas parvenus \u00e0 contr\u00f4ler l\u2019incendie de SBG2.
Par mesure de pr\u00e9caution, l\u2019\u00e9lectricit\u00e9 a \u00e9t\u00e9 coup\u00e9e sur l\u2019ensemble du site, ce qui impacte tous nos services \u00e0 SBG1, SBG2, SBG3 et SBG4.
Si votre production est \u00e0 Strasbourg, nous vous recommandons d\u2019activer votre Plan de Reprise d\u2019Activit\u00e9.
Toutes nos \u00e9quipes sont mobilis\u00e9es aux c\u00f4t\u00e9s des pompiers.
Nous vous tiendrons inform\u00e9s \u00e0 ce sujet d\u00e8s que nous aurons davantage d\u2019\u00e9l\u00e9ments.  <\/p><\/blockquote>\n\n\n\n

L’information \u00e9tait ensuite confirm\u00e9e par le fondateur d’OVH, Octave KLABA, sur son compte Twitter.
A 7h20<\/strong>, il annoncait que le feu \u00e9tait maitris\u00e9, mais que les \u00e9quipes d’OVH n’ont pas acc\u00e8s au site. Par cons\u00e9quent, les serveurs encore fonctionnels ne pourront pas \u00eatre red\u00e9marr\u00e9s dans la journ\u00e9e.
A 7h36<\/strong>, un
journaliste des DNA<\/a> publie une vid\u00e9o des pompiers<\/a> encore en intervention. On peut avoir une id\u00e9e de la force de l’incendie et de l’\u00e9tendue des d\u00e9g\u00e2ts.
A 11h40<\/strong>, Octave Klaba communique par son
compte Twitter<\/a>. Les serveurs restent \u00e9teints mais SBG3 n’est pas touch\u00e9, dans SBG1, 4 salles sont d\u00e9truite. L’int\u00e9gralit\u00e9 de SBG2 est d\u00e9truite. Il n’est pas possible pour le moment d’avoir une pr\u00e9cision sur la remise en activit\u00e9. Un communiqu\u00e9 officiel est diffus\u00e9<\/a> sur le site d’OVH.
A 13h07<\/strong>, nouvelle communication sur le
d\u00e9lai n\u00e9cessaire<\/a> \u00e0 une remise en service de ce qui n’est pas d\u00e9truit sur le site. Il faudra entre 1 et 2 semaines pour reconstruire les arriv\u00e9es et circuits \u00e9lectriques et r\u00e9tablir le r\u00e9seau fibre vers les autres datacenter du groupe. Les clients doivent reprendre leurs sauvegardes. Le portail de gestion \u00ab\u00a0Manager OVH\u00a0\u00bb est fortement sollicit\u00e9 et ne r\u00e9pond plus par moment. Un beau geste serait que les clients qui ne sont pas concern\u00e9s par le probl\u00e8me de Strasbourg ne l’utilisent pas pour laisser ceux qui en ont besoin y acc\u00e9der.<\/p>\n\n\n\n

Le 11\/03\/2021<\/strong>, on commence \u00e0 avoir une id\u00e9e de l’\u00e9tendue des sites concern\u00e9s : 3.6 millions de sites web hors ligne correspondant \u00e0 presque 500 000 noms de domaines (source Netcraft<\/a>)! Soit 18% des adresses IP attribu\u00e9es \u00e0 OVH.
Tous les datacenters encore instacts de SBG seront remis en ligne la semaine prochaine. D\u00e8s Lundi pour SBG1 et 4 et Vendredi pour SBG3.<\/p>\n\n\n\n

Peut-\u00eatre y aura-t-il un RETEX (Retour d’exp\u00e9rience) dans quelques semaines, OVH \u00e9tant habitu\u00e9 \u00e0 une certaine transparence lors des \u00e9v\u00e8nements majeurs.<\/p>\n\n\n\n

Aucun impact pour les services LEMNIA chez OVH.<\/h2>\n\n\n\n

Un incendie de cette ampleur, dans un datacenter r\u00e9put\u00e9 pour \u00eatre un endroit extr\u00eamement contr\u00f4l\u00e9, est un \u00e9v\u00e8nement rarissime. Mais l’actualit\u00e9 montre que ce n’est pas impossible.<\/p>\n\n\n\n

Aucun de nos serveurs de production n’est situ\u00e9 sur le site d’OVH Strasbourg. Il n’y a donc pas de rupture dans nos services.<\/p>\n\n\n\n

Mais si cela arrivait…<\/h2>\n\n\n\n

Nous avons choisi de faire appel \u00e0 plusieurs sites et plusieurs salles chez OVH, qui n’est pas notre seul fournisseur. Les sauvegardes sont stock\u00e9es en dehors de l’infrastructure OVH.
\u200b
Cette situation a donc \u00e9t\u00e9 anticip\u00e9e. Mais il reste n\u00e9anmoins qu’il s’agit d’un \u00e9v\u00e8nement majeur. Le pire qui puisse se produire dans un datacenter. Il est impossible de ne pas avoir un impact sur la production dans ce type de situation, m\u00eame si tout est fait pour que les cons\u00e9quences soient les plus limit\u00e9es possibles. On en peut que rappeler que la strat\u00e9gie de sauvegarde est essentielle. Elle trouve son sens lors de ce genre d’\u00e9v\u00e8nement.<\/p>\n\n\n\n

Nous souhaitons un bon courage aux \u00e9quipes d’OVH, ainsi qu’\u00e0 leurs clients impact\u00e9s.<\/p>\n","protected":false},"excerpt":{"rendered":"

L’incendie s’est d\u00e9clar\u00e9 cette nuit et vers 4h du matin, l’annonce est tomb\u00e9e : SBG2 d\u00e9truit, SBG1 partiellement touch\u00e9, SBG3 et SBG4 intact mais \u00e0 l’arr\u00eat. Pas de bless\u00e9 dans les \u00e9quipes OVH. L’activation des plans de PRA est recommand\u00e9e par OVH. Chronologie de l’incident. A 23h42, une t\u00e2che travaux est ouverte, indiquant une perturbation […]<\/p>\n","protected":false},"author":2,"featured_media":128,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_themeisle_gutenberg_block_has_review":false,"footnotes":""},"categories":[1],"tags":[],"class_list":["post-127","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-general"],"_links":{"self":[{"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/posts\/127"}],"collection":[{"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/users\/2"}],"replies":[{"embeddable":true,"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/comments?post=127"}],"version-history":[{"count":2,"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/posts\/127\/revisions"}],"predecessor-version":[{"id":524,"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/posts\/127\/revisions\/524"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/media\/128"}],"wp:attachment":[{"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/media?parent=127"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/categories?post=127"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/wlem.lemnia.net\/wp-json\/wp\/v2\/tags?post=127"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}