Un incendie majeur détruit le datacenter où sont hébergés nos serveurs EU

Ce mercredi 10 mars 2021, à 00h47, un incendie majeur a détruit le datacenter où sont hébergé les serveurs européens gérés par l'équipe technique de la coop Ni Dieu Ni Maitre. Ces serveurs hébergent une trentaine de sites d'associations militantes, dont une dizaine de sites reliés au Réseau Résistance.

Les pompiers sont intervenus immédiatement sur place mais ne sont pas parvenus à contrôler l’incendie de SBG2. C'est finalement une centaine de pompiers qui se sont mobilisés sur le site afin de protéger les équipes et limiter la progression de l'incendie. Ils ont ainsi procédé à l'isolation complète du site et de son périmètre dès 2h54.

À 4h09, le feu a détruit SBG2 et continuait de présenter des risques pour les datacentres voisins jusqu'à ce que les pompiers prennent le contrôle complet de l’incendie. SBG1 a été partiellement détruit et c'est dans ce batiment que sont nos serveurs. Depuis 5h30, le site est inaccessible aux équipes du datacenter pour des raisons évidentes de sécurité, sous le pilotage de la préfecture. L'incendie est désormais circonscrit.

Nous sommes soulagés qu'aucun blessé ne soit à déplorer, ni parmi les équipes du datacenter, ni parmi les pompiers que nous remercions pour leur mobilisation exemplaire.

Du côté des sites hébergés sur nos serveurs, l'équipe technique travaille d'arrache-pied pour rétablir les backups et migrer vers un autre datacenter, car l'électricité est toujours coupé à SBG1 et le DC ne sera pas fonctionnel avant au moins une dizaine de jours.

L'avantage d'être lié à la coopérative Ni Dieu Ni Maitre nous donne des moyens techniques et financiers que la plupart des sites n'ont pas, dont notamment l'avantage d'avoir un DRP (Disaster Recovery Plan). Notre DRP a immédiatement été activé dans les heures suivant le début de l'incendie. Ce plan prévoyait des sauvegardes hebdomadaires pour éviter la perte de donnée, ainsi que d'autres serveurs répartis à des endroits géographiques stratégiques, nous permettant un retour en ligne relativement rapide. Sans ce plan, toutes les données auraient été perdus et les sites seraient disparus pour toujours - c'est malheureusement la situation de millions d'autres sites qui étaient hébergés dans le même datacenter et qui n'avaient pas prévu de DRP.

Sites du Réseau affectés par l'incendie :
Libertaire.net
InfoLibertaire.net
Pirate-Punk.net
Anarcho-Punk.net
QuebecUnderground.net
AnarchistImages.com
PunkDownload.com
Mail Server
Backup Server #2
Backup Server #3
Database Server #2

Nous espérons que les sites seront de retour en ligne d'ici la fin de la semaine.

 

Update 13 mars 2021

• Libertaire.net est le premier site du réseau de retour en ligne
• L'électricité est toujours coupée à SBG1, SBG2 et SBG3
• Nous sommes maintenant hébergés dans un datacenter à Roubaix
• La configuration du serveur n'est pas complètement terminée donc il y a probablement une longue liste de problèmes à corriger, n'hésitez pas à signaler les bugs
• Les messages du forum postés après le 28 février ont été perdus. Les membres inscrits après cette date devront aussi se réinscrire au forum.
• Merci à toute l'équipe technique de NDNM et AFED pour leur aide et salutations à l'équipe technique de Plesk en Russie qui nous a beaucoup aidé à retourner en ligne le plus vite possible
• Des millions de sites sont toujours hors ligne et beaucoup d'entre eux ont tout perdu, on est très chanceux de s'en tirer aussi bien grâce au plan de secours qui était déjà prévu. Cet incendie aurait pu être la fin de ce forum.

Millions of websites offline after fire at French cloud services firm
L’incendie d’un datacenter d’OVHcloud inquiète de nombreux sites web - Actualités Corporate
Strasbourg : gros incendie chez OVH, de nombreux sites internet impactés
Strasbourg : un incendie chez OVH, qui abrite des serveurs informatiques, occasionne des perturbations en ligne

Update 14 mars 2021

• Anarcho-Punk.net est de retour en ligne

Update 15 mars 2021

• Pirate-Punk.net est de retour en ligne
• InfoLibertaire.net sera de retour demain

** Tous les messages postés entre le 29 février et 10 mars ont été perdus. Même chose pour les nouveaux membres inscrits pendant cette période - vous devrez vous réinscrire pour récupérer votre compte **

 

InfoLibertaire.net de retour en ligne

Merci, il y a effectivement un problème d'espace disque. On y travaille

 

L'origine de l'incendie vient des batteries, les 2 fois. Des caméras ont filmé le début d'incendie.