• IT-Karriere:
  • Services:

Facebook

Automatische Fehlerkorrektur sorgt für Ausfall

Ein Ausfall von rund 2,5 Stunden hat Facebook Schlagzeilen beschert, bis hin zu den Heute-Nachrichten des ZDF. Ausgangspunkt war eine Konfigurationsänderung, die von einem automatischen Korrektursystem als falsch angesehen wurde.

Artikel veröffentlicht am ,
Facebook: Automatische Fehlerkorrektur sorgt für Ausfall

Der Ausfall von Facebook in der vergangenen Nacht war der größte seit vier Jahren, so die Betreiber des Social Network. Schuld war eine fehlerhafte Fehlerbehandlung. Ein automatisches Korrektursystem sorgt für gewöhnlich dafür, dass fehlerhafte Konfigurationswerte im Cache durch aktualisierte Werte im persistenten Speicher überschrieben werden. Im aktuellen Fall führte aber genau dies zum Zusammenbruch.

Stellenmarkt
  1. Stadtwerke München GmbH, München (Home-Office möglich)
  2. Allianz Deutschland AG, München-Unterföhring

Ausgangspunkt war eine Konfigurationsänderung im persistenten Speicher, die das System als ungültig einstufte. Die Folge: Jedes Clientsystem erhielt den angeblich ungültigen Wert, versuchte diesen zu korrigieren und stellte dazu eine Anfrage an einen Datenbankcluster. Dieser brach schnell unter der Last der mehreren hunderttausend Anfragen pro Sekunde zusammen.

Verschlimmert wurde das Problem dadurch, dass jede fehlgeschlagene Anfrage an die Datenbank als ungültiger Wert behandelt wurde und der zugehörige Cache-Schlüssel gelöscht wurde. Das führte dazu, dass auch nach Korrektur des eigentlichen Fehlers die Zahl der Anfragen auf den Datenbankcluster hoch blieb. Das Ganze führte zu einer Feedbackschleife, die der Datenbank keine Gelegenheit ließ, sich zu erholen.

Die einzige Lösung bestand darin, sämtlichen Traffic auf das Datenbanksystem zu stoppen, was zugleich bedeutete, Facebooks Website abzuschalten. Danach konnte das Problem beseitigt und das System Stück für Stück wieder hochgefahren werden.

Mittlerweile läuft Facebook wieder, das Korrektursystem bleibt aber vorerst abgeschaltet. Facebooks Entwickler denken über ein neues Design des Systems nach, um auszuschließen, dass das System mehr Schaden anrichtet als es Fehler korrigiert.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Anzeige
Mobile-Angebote
  1. (u. a. moto g8 power 64GB 6,4 Zoll Max Vision HD+ für 159,99€)
  2. 214,90€ (Bestpreis!)
  3. 149,90€ (Bestpreis!)
  4. (u. a. Apple iPhone 11 Pro Max 256GB 6,5 Zoll Super Retina XDR OLED für 929,98€)

theb--- 27. Sep 2010

über b/ wird nicht gesprochen!

Regressionstester 25. Sep 2010

Ich wage zu behaupten, dass die Änderungen sehr wohl und vermutlich auch ausgiebig auf...

qmdu 25. Sep 2010

Seltsam scheint nur der Zeitpunkt dieses Ausfalls bei Facebook. Normalerweise bekannt als...

SepppJ 25. Sep 2010

in der Zeit, die sie wie gebannt auf die leeren Monitore starrten verlor für viele das...

Fatal3ty 24. Sep 2010

Es gibt doch was anderes zum Leben, als mit Facebook ständog zu aktualisieren. Ich...


Folgen Sie uns
       


Porsche Taycan Probe gefahren

Der Taycan ist klar als Mitglied der Porsche-Familie erkennbar. Das Design weist Elemente sowohl des aktuellen 911er (Baureihe 992), des Cayman sowie des Panamera auf.

Porsche Taycan Probe gefahren Video aufrufen
    •  /