Ett långvarigt, globalt avbrott i Facebooks appar skickade företagets ingenjörer till att lösa problemet på ett av dess datacenter i Kalifornien, enligt två personer som känner till situationen.
Avbrottet, som började runt 11:40 ET på måndagen, slog ner alla Facebooks appar – inklusive Instagram och WhatsApp – globalt och påverkade miljarder användare och miljontals annonsörer. Inuti Facebook bröt avbrottet också nästan alla interna system som anställda använder för att kommunicera och arbeta. Från och med 18.00 ET verkar det som att de flesta tjänsterna är online igen.
Flera anställda berättade för The Verge att de använde sig av att prata genom sina e-postkonton i Outlook, eftersom Facebook huvudsakligen körs på en intern version av det sociala nätverket som för närvarande inte är tillgängligt. Medan anställda kunde mejla varandra kunde de inte skicka eller ta emot mejl från externa adresser.
Eftersom Facebook kräver att anställda loggar in med sina arbetskonton för att komma åt verktyg som Google Docs och Zoom, fungerade dessa tjänster inte, vilket ledde till att vissa anställda använde alternativa tjänster som Apples FaceTime och Discord. Anställda som redan var autentiserade med icke-Facebook-verktyg som Google Docs innan avbrottet började hade fortfarande åtkomst.
Facebook -ingenjörer skickades till ett av USA: s viktigaste datacenter i Kalifornien för att återställa tjänsten, vilket innebär att korrigeringen inte kunde göras på distans. Ytterligare komplicerade frågor, avbrottet avbröt tillfälligt möjligheten för vissa anställda att komma åt företagets byggnader och konferensrum med sina märken, enligt The New York Times, som först rapporterade att ingenjörer hade skickats till datacenteret.
I ett e -postmeddelande till anställda som skickades strax efter att tjänsten återställdes sa CTO Mike Schroepfer att problemet “påverkade vår nätverksstam som förbinder alla våra datacenter med varandra.”
“Om du inte aktivt arbetar med återhämtningen, ha tålamod och skynda inte på att ladda om allt för att förhindra att bromsningen av nätverket bromsas upp”, varnade han i memot som The Verge såg.
Facebook har ännu inte angett den exakta orsaken till avbrottet, men externa experter säger redan att det berodde på ett problem med nätverkstekniken BGP eller Border Gateway Protocol.
Uppdatera 4 oktober, 18:33 ET: Noterade att avbrottet upphör när Facebook och dess andra tjänster kommer tillbaka online.
Uppdatera 4 oktober, 20:05 ET: Lade till mer information om avbrottet som delades med Facebook -anställda.
Uppdatera 4 oktober, 9: 06:00 ET: Lade till den bekräftade rapporten om att en vinkelslipare användes för att komma åt serverburarna.
Korrigering 4 oktober, 21:25 ET: En tidigare version av denna berättelse inkluderade en bekräftad rapportera att Facebook använde en vinkelslip för att komma åt serverburarna. Reportern har sedan dragit tillbaka bekräftelsen och vi har tagit bort påståendet från den här historien.