Microsoft « profondément désolé » après une panne mondiale touchant Outlook et Teams

Microsoft présente ses excuses après une panne mondiale ayant perturbé Outlook, Teams et Exchange Online, contraignant tribunaux, hôpitaux et entreprises à recourir à des solutions de secours.
Un jury renvoyé chez lui et une caution payée en personne
À la Manchester Crown Court, le juge Maurice Greene a renvoyé les jurés chez eux après que la panne a perturbé le transport des détenus et interrompu un procès. Quelqu'un, a-t-il déclaré au jury, cherchait une machine à fax.
Dans le Colorado, le personnel de la prison du comté d'Arapahoe s'appuyait sur les notifications Outlook pour traiter les paiements de caution en ligne. Lorsque ces messages ont cessé d'arriver, le bureau du shérif a demandé à toute personne versant une caution pour la libération immédiate d'un détenu de payer en personne à la prison.
Les tribunaux de l'État du Maine avaient retrouvé leur messagerie vers 7 heures du matin, heure locale, vendredi.
Ils ne pouvaient toujours pas dire si les demandes d'ordonnances de protection envoyées par courriel après 12 h 30 la veille avaient atteint le personnel des tribunaux.
La branche judiciaire de l'État a demandé aux personnes ayant déposé une demande durant cette période d'envisager de renvoyer leurs documents ou de déposer une version papier. En Grande-Bretagne, plusieurs forces de police ont demandé aux habitants d'appeler pour les affaires urgentes après avoir rencontré des problèmes pour recevoir les signalements de crimes en ligne.
Certains membres du personnel du NHS sont revenus aux dossiers médicaux papier.
Dans l'Essex, les responsables de la santé ont ouvert une ligne téléphonique temporaire afin que les maisons de retraite et autres prestataires puissent adresser des patients ou poser des questions urgentes. Les pharmacies ont eu des difficultés à joindre les cabinets de médecins généralistes via la messagerie du NHS, ce qui a conduit la National Pharmacy Association à avertir que certains patients pourraient devoir attendre plus longtemps pour leurs ordonnances.
University College London Hospitals a indiqué que son personnel était temporairement dans l'impossibilité d'envoyer ou de recevoir des courriels et a demandé aux personnes ayant des demandes urgentes d'appeler leur clinique ou le standard. À Portsmouth, le trust hospitalier a précisé que les principaux problèmes concernaient la messagerie et l'administration du personnel. Il a demandé aux patients de se présenter à leurs rendez-vous prévus, sauf si leur équipe soignante les contactait.
Deux équipes de déménagement dans le Kent avaient chargé leurs camionnettes et attendaient les clés des nouveaux logements de leurs clients. David Strank, qui dirige l'entreprise de déménagement, a déclaré au Guardian qu'un troisième client avait appelé au sujet d'un déménagement prévu le 23 novembre. Leurs avocats devaient échanger les contrats vendredi. Ils ne pouvaient pas envoyer de courriels.
Dans une société financière à Taïwan, des traders ont utilisé une machine à fax pour confirmer des achats et des ventes de titres à court terme, a rapporté Reuters. Des banques étrangères ont également eu des difficultés à transmettre des informations à leurs sièges à l'étranger. En Europe, l'opérateur boursier Euronext a demandé aux sociétés cotées d'appeler et a fait vérifier l'identité des appelants par son personnel avant de traiter des opérations habituellement effectuées par courriel.
Aviva devait présenter ses résultats trimestriels vendredi. L'assureur britannique a envoyé des numéros d'appel alternatifs et utilisé le Bluetooth pour transférer des enregistrements. Sa directrice générale, Amanda Blanc, a déclaré à Reuters que l'entreprise avait testé sa réaction à une panne d'ampleur comparable environ deux semaines plus tôt.
Comment la panne a commencé
Le tableau de bord de l'état des services de Microsoft situe le début de la panne à 16 h 17 GMT jeudi 12 novembre, selon CIO.
La vague de plaintes du public est venue plus tard.
Vers 18 heures, les signalements concernant Outlook avaient atteint un pic de près de 140 000 dans le monde sur Downdetector. Le site a enregistré des problèmes dans 74 pays et territoires en une heure environ après la première vague de signalements. Microsoft n'avait pas encore publié de total du nombre de personnes touchées.
Microsoft a d'abord indiqué que certains serveurs étaient devenus indisponibles de manière inattendue. Cela laissait moins de machines pour traiter les requêtes entrantes. La tension provenait de la perte de capacité, et non d'une hausse de la demande, a précisé l'entreprise.
Dans une déclaration rapportée à 17 h 37 GMT vendredi, Microsoft a indiqué que la défaillance avait été introduite lors d'une mise à niveau antérieure destinée à accroître la capacité du réseau.
Un changement de réseau ultérieur l'a révélée.
L'entreprise n'a pas précisé quelle partie de la mise à niveau antérieure était défectueuse ni expliqué précisément comment le changement ultérieur avait mis les serveurs hors service. Elle a écarté une cyberattaque et affirmé que ses systèmes d'IA n'étaient pas liés à la défaillance. « We are deeply sorry for the disruption this incident has caused our customers and partners », a-t-elle déclaré.
Une grande partie des perturbations s'est concentrée sur Exchange Online, le service de Microsoft 365 qui gère les courriels et les calendriers.
Certains utilisateurs d'Outlook ne pouvaient pas ouvrir leurs boîtes aux lettres dans un navigateur ou via l'application de bureau. Teams était plus inégal. Un appel pouvait avoir lieu tandis que l'invitation au calendrier du suivant échouait. Copilot a également eu des difficultés à récupérer des informations dans certains courriels professionnels et calendriers.
OpenAI et Anthropic ont signalé des problèmes avec les outils qui connectent leurs propres services d'IA à Microsoft 365.
Pourquoi les premières réparations ont échoué
Certains serveurs remis en ligne par les ingénieurs ont cessé de répondre de nouveau dès qu'ils ont commencé à recevoir des requêtes. Microsoft a limité le trafic atteignant les serveurs concernés dans certains endroits et rétabli une configuration antérieure sur certaines machines. Les ingénieurs ont ensuite rétabli le trafic par étapes pour voir si les systèmes réparés tiendraient sous charge.
L'entreprise a également testé une modification des contrôles automatisés qui déterminent si un serveur est prêt à accepter des requêtes. Ces contrôles détournent normalement le trafic des machines incapables de le traiter. Mahmoud Elkhodr, maître de conférences à la CQUniversity en Australie, a déclaré qu'une défaillance des contrôles pouvait mettre hors service des serveurs sains et accroître la pression sur les autres. Son explication s'appuyait sur les mises à jour publiques de Microsoft. La déclaration de l'entreprise en soirée n'a pas identifié les contrôles comme la source de la défaillance initiale.
La société de recherche réseau Infoblox a détecté des signes de rétablissement significatif vers 11 h 20 GMT vendredi. Microsoft a ensuite fait état d'une amélioration durable dans une grande partie de l'Europe, d'un rétablissement plus large en Amérique du Nord et de progrès dans la région Asie-Pacifique. Vendredi après-midi, les files de courriels non distribués étaient proches de la normale. Les utilisateurs qui pouvaient de nouveau ouvrir leurs boîtes de réception attendaient peut-être encore des messages envoyés pendant la panne.
Comment les gouvernements s'en sont sortis
La Norvège a signalé des perturbations dans plusieurs ministères. Le ministre grec de la Gouvernance numérique, Dimitrios Papastergiou, a déclaré que les ministères utilisant Outlook, Teams et Copilot avaient rencontré des problèmes mais pouvaient toujours travailler. Il a déclaré à la chaîne grecque Skai que les gouvernements devraient développer des alternatives pour les services essentiels.
Le ministère allemand du Numérique a indiqué que les entreprises avaient été largement touchées, tandis que le gouvernement fédéral n'a signalé aucune perturbation majeure.
Un porte-parole du ministère a déclaré à l'Associated Press que l'administration fédérale n'utilisait pas les services cloud de Microsoft et que son logiciel de messagerie était resté stable. À Singapour, des agences gouvernementales ont averti que les réponses aux courriels pourraient prendre plus de temps et ont orienté les demandes urgentes vers des centres d'appel. Les services d'urgence et Singpass, le système national d'identité numérique, sont restés disponibles.
Le règlement européen sur les données (Data Act) exige des fournisseurs de cloud qu'ils suppriment les obstacles au changement de fournisseur ou à l'utilisation de plusieurs fournisseurs simultanément. À partir du 12 janvier 2027, les fournisseurs ne pourront plus facturer aux clients le changement de fournisseur, y compris le transfert de leurs données vers l'extérieur.
Sources : Associated Press, Reuters, Euronews, The Guardian
