Microsoftin pilvipalvelut olivat yhä häiriöalttiita perjantaina torstain laajamittaisen käyttökatkon jälkeen, jolloin Outlook-sähköposti lakkasi toimimasta toimistotyöntekijöillä Yhdysvalloissa. Uudelleen käynnistetyt palvelimet saattavat lakata vastaamasta uudelleen liikenteen palatessa.
Käyttökatko alkoi hieman puolenpäivän jälkeen torstaina Yhdysvaltain aikaa. Huipussaan häiriöitä seuraava Downdetector-sivusto kirjasi yli 130 000 ilmoitusta Outlook-ongelmista, kuten CNN raportoi. Kello 15.30 mennessä ilmoituksia oli jäljellä lähes 60 000.
Microsoft ilmoitti alun perin ongelmista sähköpostilaatikoiden käytössä Exchange Onlinessa, joka on yritysten sähköpostilaatikoita isännöivä palvelu. Muita palveluita, joihin häiriö saattaa vaikuttaa, ovat Teams, SharePoint, Copilot 365, Defender XDR, Planner ja To Do. Yhtiön mukaan häiriö voi vaikuttaa käyttäjiin kaikilla alueilla.
Monille toimistotyöntekijöille Yhdysvalloissa tämä tarkoitti sitä, ettei sähköpostia voitu käyttää suuren osan työpäivästä. "Ei Outlookia, ei Teamsia", yksi käyttäjä kirjoitti X:ssä vihjaten, että kaikki voisivat lähteä kotiin.
Palvelimet, jotka putosivat verkosta
Microsoft kirjoittaa, että raskas kuormitus ei johtunut lisääntyneestä käyttäjäliikenteestä. Syynä oli useiden palvelimien odottamaton muuttuminen tavoittamattomiksi, mikä kuormitti jäljelle jäänyttä infrastruktuuria. Palvelimet putosivat pois automaattisten kunnonvalvontatarkistusten (health checks) epäonnistuttua, jotka määrittävät, saako palvelin vastaanottaa liikennettä.
Yhtiö osoittaa tarkistuksia käsittelevän komponentin mahdollisena vikojen lähteenä, mutta sillä ei ole lopullista selitystä. Microsoft ei ole löytänyt mitään viimeaikaista muutosta, joka olisi tapahtunut samanaikaisesti käyttökatkon alkamisen kanssa.
Yhtiö on ryhtynyt lukuisiin toimenpiteisiin. Microsoft keskeytti kaikki käyttöönotot, reititti liikenteen uudelleen ja käynnisti palvelimia uudelleen. Vaihtoehtoinen kunnonvalvontatarkistus toi joitakin palvelimia takaisin verkkoon, mutta torstai-iltana yhtiö myönsi, etteivät toimenpiteet olleet tuottaneet toivottua tulosta. Palvelimien ydintoiminto ylikuormittui ja kapasiteetti laski.
Perjantaina Microsoft totesi, että takaisin verkkoon tulleet palvelimet saattavat lakata vastaamasta uudelleen, kun liikenne saavuttaa ne. Yhtiö analysoi parhaillaan, mikä laukaisee tämän käyttäytymisen, ja rajoittaa tilapäisesti läpipäästettävän liikenteen tyyppejä. Alueet, joilla toimenpiteet on toteutettu, osoittavat osittaista palautumista.
Työ frontend-palvelimien palauttamiseksi ja liikenteen optimoimiseksi jatkui perjantaina. Sillä välin Microsoftin tilasivu näytti "Palvelun heikentymistä" Microsoft 365:lle. Yhtiö ei ole antanut aikataulua täydelliselle palautumiselle.
