26/3/2021

OVH annonce procéder aujourd’hui au rallumage des premiers serveurs du SBG3, mais l’accès à partir de l’extérieur ne serait effectif qu’à partir de lundi 29 mars. L’incertitude reste cependant entière quant aux données qui pourront être sauvées.

Le point sur OVH au 19/3/2021

Certains de nos clients restent impactés par la destruction du datacenter SBG2 d’OVH.

Le rétablissement des backups est reportée au 8 avril 2021. C’est un délai très long, qui est nécessaire pour reconstruire les infrastructures permettant d’accéder à ces serveurs de sauvegarde.

La situation globale est décrite ici : Tableau récapitulatif services & backup SBG (ovhcloud.com)

Cependant ce tableau ne permet pas de connaitre avec certitude l’état d’un site ou d’un dispositif en particulier. Nous nous efforçons donc de placer les services impactés en mode dégradé, ou de proposer une page d’accueil minimale sur les sites internet.

Situation au 17/3/2021

L’information générale sur l’incendie qui a détruit le datacenter SBG2 à Toulouse est publiée sur de nombreux sites internet. A ce jour, il semble que ce sinistre a totalement détruit l’un des quatre datacenter (SBG2), la situation concernant SBG1, SBG3 et SBG4 étant incomplète.

Cependant cette communication initiale d’OVH est difficile à interpréter, dans la mesure ou des dispositifs nommés « openstack-sbg1, openstack-sgb3 et openstack-sbg4 » étaient en fait physiquement hébergés dans le bâtiment SBG2 (et sont donc détruits). C’est une ambigüité qui est largement reprochée à OVH. En effet, ces dispositifs contenaient des serveurs de secours (backups), pour lesquels les descriptifs d’OVH annonçaient « une résilience de 100% ».

BSI disposait d’un double système de backups et d’un support technique chez OVH, l’ensemble pouvant paraitre proportionné à l’activité de sites internet et d’applications web.

A ce jour, la situation concernant les dispositifs utilisés pour nos clients est la suivante :

  • les mails sont rétablis à l’exception d’un serveur historique et quelques boites pour lesquels nos clients ont été contactés individuellement avec une offre de migration sur des messageries plus performantes
  • Certains sites web restent impactés.
  • Certaines web applications restent impactées
  • les dispositifs de boutons d’appel (internet des objets) ont été rétablis.

Concernant les services hors service :

Il est très difficile d’engager d’ores à présent un plan de rétablissement sans avoir un diagnostic complet de la situation. Concrètement, nous attendons le communiqué promis par OVH pour le lundi 22 mars 2021.

Les actions immédiates que nous mettons en oeuvre sont les suivantes :

  • au minimum, nous pouvons mettre en place une page d’accueil minimaliste informant les visiteurs du site sur cette situation exceptionnelle.
  • pour les sites ayant un impératif de contact avec les visiteurs, nous publions un lien vers une page alternative, une adresse de mail et les coordonnées de contact téléphonique indispensable au maintien du contact clients.
  • nous poursuivons l’inventaire des ressources encore disponibles, site par site, pour préparer les plans de reprise qui seront définis dans la semaine du 22 au 26 mars 2021.

Conscients de l’importance des ces services pour nos clients, nous sommes mobilisés sur ces plans de reprise, et différons tout projet non-prioritaire.

Opérations de maintenance en cours

Suite à l’incendie du 10 mars d’un datacenter OVH à Strasbourg, certains de nos services sont actuellement indisponibles, ou fonctionnent en mode dégradé.

  • Messageries Exchange : fonctionnelles en mode dégradé
  • Messageries PRO : rétablissement prévu dans les prochaines 48h
  • Messagerie Smartermail (plus ancienne) : rétablissement prévu le 22 mars.

A l’occasion de cet accident regrettable, Il est éventuellement possible d’anticiper une migration de votre dispositif vers une solution Exchange. Veuillez nous appeler au 04 66 30 00 00

  • Dispositifs de boutons d’appel : provisoirement impactés par l’incendie.
  • Sites internet : selon le datacenter impacté, votre site peut être provisoirement indisponible. Nous prévenons vos visiteurs par un message d’information en page d’accueil.
  • Service de gestion externalisés, web applications : nous appeler selon la situation.
  • Sauvegardes externalisées de vos données : ne sont pas impactées

Nous regrettons ce sinistre majeur et faisons le maximum pour rétablir les différents services au plus vite.

Nous allons également renforcer nos procédures de sauvegardes et de reprise après incident, afin de réduire les temps de rétablissement en cas de sinistre majeur tel que celui qui s’est produit le 10 mars (plusieurs milliers de serveurs et des infrastructures réseaux détruits).

Nous vous remercions pour votre compréhension, et nous tenons à votre disposition pour vous accompagner dans cette situation de crise.

L’équipe BSI