Golem.de
 
Suchen bei Golem.de
Golem.de Newsletter-Abo
Videos bei Golem.de
Aperture 3 - Produktvideo von Apple Aperture 3 - Produktvideo von Apple
Stellenmarkt

Senior Solution Architect (m/w)
Siemens IT Solutions and Services, München

Field Service Engineer Clinical Chemistry / Automation (m/w)
Siemens Healthcare Diagnostics, Regensburg

Teamleiter/in im IT-Center
DELICom DPD GmbH, Aschaffenburg

Detailsuche
Newsletterabo
Verwandte Themen

Software-Entwicklung, Internet, OSS, Desktop-Applikationen, lighttpd, Cloud-Computing, Dateisystem, Facebook, Ruby, Soziales Netz

Verwandte Artikel
Letzte Meldungen

600 GByte mit 10.000 U/min von Seagate

British Library und Microsoft liefern kostenlose E-Books

Wenn Sicherheitssoftware zu Sicherheitslücken führt

KDE SC 4.4 - Caikaku macht einen großen Schritt

Quadriga Games - ein neues deutsches Spielestudio

Zoomit: SD-Kartenleser fürs iPhone

EA macht weniger Umsatz im Weihnachtsgeschäft

Wie geht es weiter mit dem Kindle?

Samsung S5620: Handy mit kapazitivem Touchscreen und WLAN

Aperture 3 lernt GPS, erkennt Gesichter und bekommt Pinsel

Aiptek MobileCinema D25 - Projektor mit DVD und DVB-T

Optimus: Grafikkerne im Notebook automatisch umschalten

Innenministerium gibt 2 Millionen Euro für Botnetzbekämpfung

Dalvik Turbo soll Android dreimal schneller machen

Amazons S3 lernt Versionierung

Copperlicht - 3D-Engine rendert Quake 3 im Browser

EU-Kommission bekennt Farbe zu ACTA

Samsung Shark: Drei Mobiltelefone für soziale Netzwerke

Kingston profitiert von Preisanstieg bei DRAM und Flash

Infocus-Projektoren über Funk auch mit dem Mac ansteuern

Tankstellen werden zu Akkuwechselstationen

AMD verrät Details zu CPU- und GPU-Kombination Llano

Microsoft: Windows 7 hat keine Probleme mit Notebookakkus

Flash soll auf Macs bald schneller laufen als unter Windows

Speedcommander 13.10 korrigiert Programmfehler

Radeon HD 5570 - DirectX-11 auch für Kompakt-PCs

Deutsche Telekom greift Kabel Deutschland an (Update)

Gallium 3D bringt DirectX für Linux und FreeBSD

IBMs Power7 - bis zu acht Kerne, 32 Threads und 4,1 GHz

Bundesregierung will löschen statt sperren

Weitere News


Haben wir etwas übersehen? Dann Mail an news@golem.de.

HOME

Internet / 21.10.2009 / 11:58Trackback    Teilen    Druck 
Wie Facebook die Daten von 300 Millionen Nutzern verkraftetSeiten

Wie Facebook die Daten von 300 Millionen Nutzern verkraftet

30.000 Server, 25 TByte Logfile täglich und 600.000 Fotos pro Sekunde

Facebook ist groß, in jeder Dimension. Das sagt Jeff Rothschild, Vice President für Technologie bei Facebook bei einer Präsentation an der Universität San Diego und unterlegte dies mit Zahlen. Rothschild erläuterte die Architektur hinter Facebook und sprach über künftige technische Herausforderungen.

Facebook verzeichnet mit derzeit 200 Millionen aktiven Nutzern rund 200 Milliarden Pageviews pro Monat und verarbeitet täglich 3,9 Billionen Feed-Aktionen. Täglich werden mehr als 1 Milliarde Chat-Nachrichten über Facebook ausgetauscht und mehr als 100 Millionen Suchanfragen gestellt. Zudem werden wöchentlich mehr als 2 Milliarden Content-Elemente hochgeladen. Facebook Connect kommt auf mehr als 15.000 Webseiten zum Einsatz.

Dazu betreibt Facebook aktuell rund 30.000 Server, so Rothschild und betonte den großen Einfluss, den Facebooks Techniker haben: Statistisch betrachtet ist jeder Techniker bei Facebook für rund 1 Million Nutzer zuständig.

Zu den populärsten Applikationen auf Facebook zählt die Foto-Applikation mit derzeit 20 Milliarden Fotos, von denen jedes in vier Auflösungen gespeichert wird. Insgesamt hostet Facebook also rund 80 Milliarden Fotos, wobei monatlich 2 bis 3 Milliarden hinzukommen. Auch die Nachfrage ist groß: Bis zu 600.000 Fotos liefert Facebook pro Sekunde aus.

Haystack - eigenes Dateisystem für Fotos

Dabei hatte Facebook anfangs den Erfolg seiner Foto-Applikation und die damit einhergehenden Herausforderungen unterschätzt, räumt Rothschild ein. So war das System zunächst in zwei Schichten aufgeteilt: Die Upload-Schicht kümmerte sich um die eigentlichen Uploads, skalierte die Bilder und speicherte sie auf NFS-Server. Die Serving-Schicht lieferte die auf NFS-Servern gespeicherten Bilder aus. Dabei kamen kommerzielle NFS-Server zum Einsatz, doch die verfügbaren Dateisysteme waren nicht gut darin, solch große Datenmengen zu verwalten, so Rothschild. Zudem passten die Metadaten nicht in den Speicher, was zu vielen Festplattenzugriffen führte. Letztendlich war I/O das große Problem, nicht die Speicherdichte.

Um dem Herr zu werden, begann Facebook die am häufigsten abgerufenen Bilder zu cachen und über ein CDN auszuliefern. Das Cachesystem entwickelte Facebook auf Basis von Memcached und Lighty. weiter...
Wie Facebook die Daten von 300 Millionen Nutzern verkraftetSeiten
Kommentar-Übersicht / Kommentieren:
Re: Wieviele... (..........., 03.02.10 23:31)
Re: Bei der Datenmenge ... (Michael 76, 27.10.09 02:11)
Hatte das Vergnügen mir das anzuhören (gyko, 27.10.09 02:06)
Re: Krank, wie viele Opfer da draussen sind (Michael 76, 27.10.09 02:05)
Re: Die sollten PHP optimieren (Michael 76, 27.10.09 01:50)
Trackback:

unterm Facebook (/var/bergercity/, 29.10.09 22:41)

the blue window (www.amade.ch, 27.10.09 17:20)

Wie Facebook mit enormen Datenmengen umgeht (IT-Pulse, 25.10.09 09:12)

Jeff Rothschild spricht über die Technik von Facebook (WebhostingBlog - Corporate-Blog der dogado Internet GmbH, 22.10.09 09:23)

Facebook und die Technik (Timo Mankartz, 22.10.09 09:17)

Facebook - Technik im Hintergrund (Blog von Jens Ihnow, 21.10.09 21:00)

Fakten: Facebook Zahlen (Test, Download & Empfehlungen, 21.10.09 20:17)

100’000 neue Fotos pro Sekunde auf Facebook (infoblog.li, 21.10.09 18:10)

Aktuelle Artikel

600 GByte mit 10.000 U/min von Seagate
Seagates Savvio 10K.4 hat bis zu 600 GByte Speicherkapazität im 2,5-Zoll-Formfaktor. Der Hersteller bietet die Festplatte, die bis zu 141 MByte/s bewegen können, mit zwei Schnittstellen an.

British Library und Microsoft liefern kostenlose E-Books
Charles-Dickens- und Jane-Austen-Liebhaber haben ab Frühjahr einen guten Grund, sich ein E-Book-Lesegerät zu kaufen. Dann stellt die British Library in Zusammenarbeit mit Microsoft Erstausgaben von mehr als 65.000 literarischen Werken aus dem 19. Jahrhundert kostenlos als E-Book zur Verfügung.

Wenn Sicherheitssoftware zu Sicherheitslücken führt
Endgeräte sind heute normalerweise vom Hersteller gut geschützt, Backup-Programme, Firewalls, Antivirenscanner sind vorinstalliert, Update-Routinen aktiviert. Doch der Nutzen dieser Sicherheitsvorkehrungen ist gering, sagt der Sicherheitsexperte Michiel de Bruijn.

 

 

Audio/Video | Desktop-Applikationen | Foto | Games | Handy | Internet | Mobil | OSS | PC-Hardware | Politik/Recht | Security | Software-Entwicklung | Wirtschaft | Wissenschaft

Ticker | RSS | API | Forum | Zusatz-Dienste | Jobs | IT-Events

Home | Impressum | Werbung | Freunde

Copyright © 1997 - 2010 Golem.de. Alle Rechte vorbehalten.

 

Zum Artikel Text einblenden Text ausblenden