Gmail, GCP, Youtube: Service-Quota von 0 führte zu massivem Google-Ausfall

Meldet ein Dienst, dass er nicht benutzt wird, braucht er auch keine Ressourcen. Das hat sämtliche Google-Dienste ausfallen lassen.

Artikel veröffentlicht am ,
Authentifizierte Google-Nutzer sahen bei dem Ausfall nur Fehlermeldungen wie diese von Youtube.
Authentifizierte Google-Nutzer sahen bei dem Ausfall nur Fehlermeldungen wie diese von Youtube. (Bild: Youtube)

Das Team von Googles Cloud-Infrastruktur hat eine detaillierte Analyse zu dem massiven Ausfall von vergangener Woche veröffentlicht. Der Fehler sorgte dafür, dass die authentifizierte Nutzung aller Google-Dienste nicht mehr möglich war. Dazu gehörten etwa Gmail, Youtube, der Play-Store und viele weitere Dienste. Der Anbieter hatte bereits bestätigt, dass dies an einem Fehler im Zusammenhang mit internen Quota-Regeln zusammenhing. Wie Google nun schreibt, lag das Quota bei 0.

Stellenmarkt
  1. Product Owner (m/w/d)
    QUNDIS GmbH, Erfurt
  2. Fachbereichsleiter Rohdatenaufbereitung (w/m/d) Expert-Cyber-Security-Specia- list
    Gemeinsames Kompetenz- und Dienstleistungszentrum der Polizei, Leipzig
Detailsuche

Ein Reihe von verschiedenen Umständen hat zu dieser Hauptursache geführt, wie das Team nun schreibt. So heißt es zur Authentifizierung selbst: "Der Google User ID Service verwaltet für jedes Konto eine eindeutige Kennung und Authentifizierungsdaten für OAuth-Token und Cookies. Er speichert Kontodaten in einer verteilten Datenbank, die Paxos-Protokolle verwendet, um Aktualisierungen zu koordinieren. Aus Sicherheitsgründen lehnt dieser Dienst Anforderungen ab, wenn veraltete Daten erkannt werden."

Wie es weiter heißt, nutzt Google eine Reihe von Automatisierungswerkzeugen, um die Quota-Regeln für verschiedene Ressourcen zu verwalten. Hinzu kommt, dass das Unternehmen den Google User ID Service auf ein neues Quota-System migriert hat. Dabei verblieben aber alte Teile in dem neuen System, was letztlich dazu führte, dass die Nutzung des Dienstes selbst mit 0 angegeben wurde. In den Überprüfungsregeln zum Quota-System ist dieser Fall bisher nicht vorgesehen gewesen.

Letztendlich wurde das Quota für die Account-Datenbank heruntergesetzt, so dass keine neue Daten geschrieben werden konnten. Kurz darauf waren die Lese-Operationen damit veraltet, was zu Fehlern beim Nachschlagen der Authentifizierungsdaten führte. Da sämtliche Google-Dienste den eigenen Anmeldedienst nutzen, konnten diese eben alle nicht verwendet werden. Eine Nutzung ohne Authentifizierung war aber weiter möglich.

Golem Akademie
  1. Dive-in-Workshop: Kubernetes
    25.-28. Januar 2022, online
  2. Netzwerktechnik Kompaktkurs
    8.-12. November 2021, online
  3. IT-Fachseminare der Golem Akademie
    Live-Workshops zu Schlüsselqualifikationen
Weitere IT-Trainings

Als unmittelbare Lösung für das Problem wurde die Durchsetzung der Quota-Regeln aufgehoben und dies dann auf alle Rechenzentren des Unternehmens übertragen, so dass die einzelnen Dienste schnell wieder verfügbar waren. Als langfristige Lösung will Google die Ausfallsicherheit des Authentifizierungsdienstes verbessern, damit künftig ähnliches nicht mehr passiert.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Rabbit 22. Dez 2020

Konnte man auch: Private Window im Browser auf, und man konnte Youtube im anonymen Modus...

FoxCore 21. Dez 2020

So wie ich das interpretiert habe, ist ungefähr folgendes passiert (hab's jetzt nicht...

FoxCore 21. Dez 2020

War eigentlich eine Antwort auf einen Beitrag, wollte keinen neuen Thread öffnen...

JouMxyzptlk 21. Dez 2020

99,999% = Faktor 0,00001, also etwa 5 Minuten 16 Sekunden pro Jahr. Dein Calculateme...

Glitti 21. Dez 2020

Alles mögliche kann ein Single point of Failure sein. Ein defekt repliziert sich auf alle...



Aktuell auf der Startseite von Golem.de
Infiltration bei Apple TV+
Die Außerirdischen sind da!

Nach Foundation wartet Apple innerhalb kürzester Zeit gleich mit der nächsten Science-Fiction-Großproduktion auf. Diesmal landen die Aliens auf der Erde.
Eine Rezension von Peter Osteried

Infiltration bei Apple TV+: Die Außerirdischen sind da!
Artikel
  1. Truth Social: Trumps soziales Netz bekommt Probleme mit Hackern und Lizenz
    Truth Social
    Trumps soziales Netz bekommt Probleme mit Hackern und Lizenz

    Hacker starten in Trumps-Netzwerk einen "Online-Krieg gegen Hass" mit Memes. Der Code scheint illegal von Mastodon übernommen worden zu sein.

  2. Krypto: NRW versteigert beschlagnahmte Bitcoin
    Krypto
    NRW versteigert beschlagnahmte Bitcoin

    Nordrhein-Westfalen hat Bitcoin im achtstelligen Eurobereich beschlagnahmt und will diese jetzt loswerden - im Rahmen einer Auktion.

  3. Rust, Deepfake, Sony, Microsoft: Konsolen-Termin für Among Us, mehr Speicher für die Xbox
    Rust, Deepfake, Sony, Microsoft
    Konsolen-Termin für Among Us, mehr Speicher für die Xbox

    Sonst noch was? Was am 22. Oktober 2021 neben den großen Meldungen sonst noch passiert ist, in aller Kürze.

Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Daily Deals • Seagate SSDs & HDD günstiger (u. a. ext. HDD 14TB 326,99) • Dualsense PS5-Controller Weiß 57,99€ • MacBook Pro 2021 jetzt vorbestellbar • World of Tanks jetzt mit Einsteigerparket • Docking-Station für Nintendo Switch 9,99€ • Alternate-Deals (u. a. iPhone 12 Pro 512GB 1.269€) [Werbung]
    •  /