Anhang: Streamverarbeitungsmuster bei Netflix
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
- ohne Werbung
- mit ausgeschaltetem Javascript
- mit RSS-Volltext-Feed
| Muster | Phase | Anwendungsfälle |
|---|---|---|
| Datenrouting | 1 | Protokollierung, Datenbewegung |
| Echtzeitwarnungen / Dashboard | 1, 2 | SPS-Warnung, Infrastrukturzustand, Überwachung (Cassandra & Elasticsearch), Echtzeit-QoE-Überwachung |
| Echtzeit-Datenstichproben / Entdeckung | 2 | Kostengünstige Echtzeitinformationen |
| Verbindungen zwischen Streams (ETL) | 3 | Berechnung des Übernahmeanteils, Berechnung der Label für Empfehlungsdienst |
| Verbindungen zwischen Stream und Tabelle (ETL) | 3 | Zusätzlicher Input: Streams verbinden mit langsamer Iceberg-Tabelle |
| Streamingsitzung | 3 | Personalisierungssitzung, Metrikensitzung |
| Beobachtbarkeit in Echtzeit | 3 | Verteilte Nachverfolgung, Chaos EXPER-Überwachung, Anwendungsüberwachung |
| Anomalie-/Betrugserkennung in Echtzeit | 3 | Kontextwarnung, PII-Erkennung, Verhindern betrügerischer Anmeldungen |
| DevOps-Entscheidung in Echtzeit Tool | 3 | Automatische Skalierung, Streaming ACA und A/B-Tests, Optimierung der CDN-Platzierung |
| Ereignisquelle Materialansicht Streaming-Hinterfüllung / Neuformulierung | 3 | Content Delivery Network Snapshots, Abmilderung von Pipeline-Fehlern, Kaltstart vermeiden |
| Datenqualitätskontrolle | 4 | Management für Schemaentwicklung, SLA für Datenqualität, Kostensenkung über Avro-Komprimierung |
| Quelle/Senken - agnostische Datensynchronisierung | 4 | Delta, Datenvernetzung, Operative Berichte, Benachrichtigung, Pipeline für Suchindex |
| Annähernde Echtzeit-Inferenz | 4 | Empfehlung für Kundenservice, absichtsbasierte Sitzungsanpassungen |
| Streaming-SQL | 4 | Dynamische Funktionsentwicklung |
| Intelligenter Betrieb | 4 | Automatische Diagnose und Behebung |
Streamverarbeitungsmuster bei Netflix
| Chancen und Ausblick |
Ich hatte den Artikel in meinem RSS feed gespeichert, weil ich die Thematik sehr...
Ich finde den Artikel auch furchtbar "sperrig". Und ja, ist mir auch schon desöfteren...
kwt.