Container: Githubs Kubernetes-Cluster überlebt regelmäßige Kernel-Panic

Der fast ein Jahrzehnt alte monolithische Stack von Github ist in nur wenigen Monaten auf die Container-Orchestrierung Kubernetes migriert worden. Interessant daran sind vor allem die dabei aufgefundenen Fehler, deren Lösungen und die beschriebene Vorteile.

Artikel veröffentlicht am ,
Bei Github übernimmt künftig Kubernetes das Steuern der Dienste.
Bei Github übernimmt künftig Kubernetes das Steuern der Dienste. (Bild: Github)

Der Code-Hosting-Dienst Github nutzt zur Verwaltung seiner Webseite sowie der API-Zugriffe seit einigen Wochen einen selbst aufgesetzten Kubernetes-Cluster, der zur Orchestrierung der unterschiedlichen Dienste auf Githubs sogenannter Metal-Cloud dient. Damit habe das Entwickler-Team in nur wenigen Monaten den alten Aufbau völlig abgelöst, der seit acht Jahren im Grunde unverändert gewesen sei.

Stellenmarkt
  1. Bilanzkreismanager (m/w/d)
    VSE Aktiengesellschaft, Saarbrücken
  2. Referent (w/m/d) für die Arbeitsgruppe "Informations- und Kommunikationstechnik"
    Ministerium des Innern und für Kommunales des Landes Brandenburg, Potsdam
Detailsuche

Wie das Github-Team in seinem Technikerblog schreibt, sind die mit Container-Technologie und der Orchestrierung Kubernetes üblicherweise verbundenen Vorteile so auch bei Github eingetreten. Einzelne Teams können ihre kleinen speziellen Anwendungen nun leichter und viel schneller als bisher auch einfach selbst ausrollen. Das Team für das Site Reliability Engineering (SRE) kann sich damit wieder verstärkt auf seine eigentliche Aufgabe konzentrieren: das Pflegen und Bereitstellen von Infrastruktur.

Darüber hinaus beschreibt das Team aber auch einige eher unerwartete Fehler bei ihrer Migration auf Kubernetes. So hätten etwa Tests ergeben, das der Ausfall eines einzelnen API-Knotens die gesamte verfügbare Arbeitslast im gesamten Cluster deutlich negativ beeinflusse. Da dies aber möglicherweise den gesamten Github-Dienst stören könnte, laufen die Anwendungen nun pro Rechenzentrum in mehreren Cluster. Sollte ein Cluster Probleme bereiten, werden Aufrufe dann automatisch auf andere laufende Cluster verteilt.

Das Team berichtet auch davon, dass sehr hohe Lasten teilweise zu einer Kernel-Panic in den Kubernetes-Nodes führt. Bei solch einem Systemabsturz helfen nur Neustarts des gesamten Systems. Obwohl dieses Problem weiterhin auftritt und die Entwickler noch nach einer Ursache suchen, läuft Kubernetes bereits produktiv im Einsatz. Immerhin sei Kubernetes in der Lage, diese Probleme automatisch zu umgehen, so dass die intern vorgegebenen Fehlerraten weiter eingehalten werden können.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
Softwarepatent
Uraltpatent könnte Microsoft Millionen kosten

Microsoft hat eine Klage um ein Software-Patent vor dem BGH verloren. Das Patent beschreibt Grundlagentechnik und könnte zahlreiche weitere Cloud-Anbieter betreffen.
Ein Bericht von Stefan Krempl

Softwarepatent: Uraltpatent könnte Microsoft Millionen kosten
Artikel
  1. Krypto: Angeblicher Nakamoto darf 1,1 Millionen Bitcoin behalten
    Krypto
    Angeblicher Nakamoto darf 1,1 Millionen Bitcoin behalten

    Ein Gericht hat entschieden, dass Craig Wright der Familie seines Geschäftspartners keine Bitcoins schuldet - kommt jetzt der Beweis, dass er Satoshi Nakamoto ist?

  2. Fusionsgespräche: Orange und Vodafone wollten zusammengehen
    Fusionsgespräche
    Orange und Vodafone wollten zusammengehen

    Die führenden Netzbetreiber in Europa wollen immer wieder eine Fusion. Auch aus den letzten Verhandlungen wurde jedoch bisher nichts.

  3. Spielfilm: Matrix trifft Unreal Engine 5
    Spielfilm
    Matrix trifft Unreal Engine 5

    Ist der echt? Neo taucht in einem interaktiven Programm auf Basis der Unreal Engine 5 auf. Der Preload ist bereits möglich.

Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Daily Deals • MM Weihnachtsgeschenkt (u. a. 3 Spiele kaufen, nur 2 bezahlen) • PS5 & Xbox Series X mit o2-Vertrag bestellbar • Apple Days bei Saturn (u. a. MacBook Air M1 949€) • Switch OLED 349,99€ • Saturn-Advent: HP Reverb G2 + Controller 499,99€ • Logitech MX Keys Mini 89,99€ [Werbung]
    •  /