Izpad se je začel v četrtek, ko so uporabniki v ZDA začeli poročati o motenem dostopu do elektronske pošte outlook. Težave so se nadaljevale v petek in se razširile po svetu. Milijoni uporabnikov niso mogli dostopati do elektronske pošte in drugih storitev microsoft 365, med drugim exchangea in teamsov.
Paleta posledic je bila zelo pisana. Zapori niso mogli izpuščati zapornikov, bolnišnice so se morale vrniti k papirnim evidencam, šole so izgubile stik s starši, policijske uprave pa niso mogle sprejemati prijav kaznivih dejanj, poroča Guardian. Microsoft je storitve obnovil do sobote in se uporabnikom opravičil. Podjetje ni navedlo, da bi bil izpad posledica kibernetskega napada.
Prve ugotovitve je Microsoft objavil v ponedeljek. Charles Lamanna, izvršni podpredsednik za copilota, agente in platformo, je na družbenem omrežju X pojasnil, da je bila ena od ključnih težav programska napaka, ki je v sistemu ostala od julija. Zaradi nje so strežniki postali preobremenjeni in se prenehali odzivati. Toda sama napaka ne bi povzročila tako obsežnega izpada, če se ne bi pojavili še drugi zapleti, je pojasnil.
Odpoved rezervne povezave in zmanjšana zmogljivost
Microsoft ima praviloma na voljo dva omrežna prehoda, prek katerih različni sistemi izmenjujejo podatke. Eden od njiju je prenehal delovati za storitev teams, zato se je promet preusmeril na glavni prehod. Hkrati je bilo zaradi neodvisne težave, ki se je pojavila dan prej, nedelujočih več kot 14 odstotkov zmogljivosti strežnikov.
»Zaradi povečanih obremenitev in zmanjšanih zmogljivosti strežnikov je omrežni prehod naletel na skrito napako iz julija,« je zapisal Lamanna. Zahteve so se začele kopičiti, dokler se strežniki niso prenehali odzivati. Do tega je prišlo v času največje obremenitve omrežja v ZDA.
Obnova storitev je bila zahtevnejša kot običajno, saj so se strežniki ob ponovnem vzpostavljanju delovanja takoj soočili s čakalno vrsto zahtevkov, je še dodal. Običajni avtomatizirani postopki za obnovo namreč niso bili zasnovani za odpravljanje tako obsežne odpovedi.
Končno poročilo še pripravljajo
Dodatno težavo je predstavljalo dejstvo, da je programska napaka izvirala iz več mesecev stare spremembe. Microsoft zato ni mogel preprosto razveljaviti nedavne posodobitve, kar bi lahko storil ob novejših napakah. Tudi običajni mehanizmi za postopno uvajanje sprememb in izklapljanje posameznih funkcij niso ponujali hitre rešitve.
Lamanna je napovedal, da bo Microsoft objavil še končno poročilo z dodatnimi informacijami o vzrokih in poteku izpada.