Abo
  • Services:
Anzeige
Sandstorm erreicht 55 GBit/s Datendurchsatz.
Sandstorm erreicht 55 GBit/s Datendurchsatz. (Bild: Universität Cambridge)

Sandstorm Spezial-Webserver ist 3,5-mal schneller als Nginx

Forscher der Universitäten Cambridge und London haben mit Sandstorm einen Webserver entwickelt, der auf die Auslieferung statischer Inhalte optimiert ist. Er ist in Tests dreimal so schnell wie Nginx und erzeugt dabei weniger CPU-Last, so dass er moderne Netzwerkhardware voll ausnutzen kann.

Anzeige

Spezialisierung für mehr Leistung: So lässt sich die Idee von Ilias Marinos und Robert Watson von der Universität Cambidge und Mark Handley vom University College London beschreiben. Aktuelle Netzwerk-Stacks seinen ein "Meisterwerk der Generalität", schrieben die drei, die mit ihrem Webserver Sandstorm zeigen, dass sich durch Spezialisierung die Leistung deutlich steigern lässt. Denn die herkömmlichen Netzwerk-Stacks basieren alle auf Code, der Anfang der 90er Jahre entstand.

Dieser wurde auf Basis des Netmap-Frameworks von FreeBSD entwickelt, das den Pufferspeicher der Netzwerk-Interfaces direkt in den Userspace mappt. Sandstorm ist ausschließlich dafür ausgelegt, statische Dateien auszuliefern. Und das soll Sandstorm deutlich schneller können als herkömmliche Webserver. Nach Ansicht der Forscher ist für solche Server in Systemlandschaften mit hunderten oder tausenden Servern, die spezielle Aufgaben übernehmen, ausreichend Platz. So könnten Server wie Sandstorm beispielsweise eingesetzt werden, um Bilder oder statische Inhalte aus einem Cache auszuliefern.

Es sind vor allen drei Dinge die Sandstorm schneller machen sollen als herkömmliche Webserver wie Nginx, die schon heute diverse Optimierungen nutzen, um statische Inhalte sehr schnell und mit geringer CPU-Last auszuliefern. Erstens haben die drei Forscher einen kompletten Zerocopy-Stack umgesetzt, so dass das Senden der Daten sehr effizient erfolgt. Das bezieht sich nicht nur auf Daten, die das Betriebssystem bereitstellt, beispielsweise Dateisystem-Blöcke, sondern umfasst auch HTTP-Header, die von der Applikation bereitgestellt werden.

Zweitens optimieren sie über traditionelle Grenzen hinweg, so dass beispielsweise Code auf Applikationsebene eine Vorabsegmentierung von Daten anfordern kann, um diese mehrfach auszuliefern. Zudem wird extensives Batching genutzt, um den Overhead von Systemaufrufen aus dem Userspace zu reduzieren.

Drittens ist die Implementierung synchron, ausgehend von empfangenen Paketen was das Caching verbessern und die Latenz beim Senden des ersten Antwort-Pakets minimieren soll. Dabei wird auf Queues und das Zwischenspeichern von Daten verzichtet.

Vorgefertigte Pakete

Letztendlich lädt Sandstorm eine statische Datei in den Speicher, generiert daraus alle Pakete, die gesendet werden müssen, um sie zu übertragen, einschließlich TCP, IP und Link-Layer-Headern. Wird die Datei angefragt, muss der Server nur noch TCP-Protokoll-Control-Blocks (TCB) anfordern, um den Status der Verbindung zu überwachen, die eigentlichen Pakete, die er senden muss, liegen aber schon fertig vor. Die Pakete werden dann direkt per Netmap an das Netzwerk-Interface gesendet.

3,5 Mal mehr Durchsatz als Nginx

Die Forscher haben ihre Implementierung gegen Nginx unter FreeBSD und Linux getestet, einmal auf alter Hardware (zwei Xeon X5355, Intels Netzwerkkarte 82598EB Dual Port 10GbE und 8 GByte RAM) mit Linux 3.6.7 und FreeBSD 9-Stable und einmal auf moderner Hardware (Xeon E5-2643 mit vier Kernen, 128 GByte RAM und drei Intel-Netzwerkkarte vom Typ 82599EB 10GbE) mit Linux 3.10.10 und FreeBSD 10-Current mit speziellen Patches von Netflix zur Optimierung von sendfile().

Auf alter Hardware erreicht Sandstorm bei zwei gleichzeitigen Verbindungen einen um rund 35 Prozent höheren Datendurchsatz. Mit steigender Zahl gleichzeitiger Verbindungen hat Sandstorm größere Vorteile. Allerdings ist es nicht möglich, die eine Netzwerkkarte mit kleinen Dateien auszulasten. Das gelingt erst bei Dateigrößen ab etwa 100 KByte.

Interessanter sind die Ergebnisse auf der modernen Hardware, die Data Direct I/O unterstützt und somit DMA-Zugriffe über PCIe von der Netzwerkkarte direkt auf den Last-Level Cache (LLC) des Prozessors zulässt. Sandstorm kann dadurch eine einzelne 10-Gigabit-Ethernet-Karte bei nur 13 Prozetn CPU-Last vollständig ausnutzen, skaliert linear bis zu sechs Netzwerkkarten und erreicht damit einen Datendurchsatz von 55 GBit/s bei 73 Prozent CPU-Last. Die konventionellen Stacks kommen den Forschern zufolge nicht über 16 GBit/s bei vier Netzwerkkarten.


eye home zur Startseite
am (golem.de) 13. Dez 2013

Das Forum basiert auf http://www.phorum.org/, allerdings haben wir daran mittlerweile...

boiii 12. Dez 2013

Das Vorschaubild ist leider immer nur als kleine Ansicht verfügbar. Es gibt sogar noch...

Gunah 12. Dez 2013

Das nginx langsamer ist als manche andere was Statische Dateien angeht ist doch...



Anzeige

Stellenmarkt
  1. L-Bank Staatsbank für Baden-Württemberg, Karlsruhe
  2. Hermes Germany GmbH, Hamburg
  3. Zühlke Engineering GmbH, Eschborn (bei Frankfurt am Main), München, Hannover, Hamburg
  4. noris network AG, Nürnberg


Anzeige
Hardware-Angebote
  1. (täglich neue Deals)

Folgen Sie uns
       


  1. Apple

    Aktivierungssperre des iPads lässt sich umgehen

  2. Amazon

    Downloader-App aus dem Fire-TV-Store entfernt

  3. Autonomes Fahren

    Apple zeigt Interesse an selbstfahrenden Autos

  4. Sicherheit

    Geheimdienst warnt vor Cyberattacke auf russische Banken

  5. Super Mario Bros. (1985)

    Fahrt ab auf den Bruder!

  6. Canon EOS 5D Mark IV im Test

    Grundsolides Arbeitstier mit einer Portion Extravaganz

  7. PSX 2016

    Sony hat The Last of Us 2 angekündigt

  8. Raspberry Pi

    Schutz gegen Übernahme durch Hacker und Botnetze verbessert

  9. UHD-Blu-ray

    PowerDVD spielt 4K-Discs

  10. Raumfahrt

    Europa bleibt im All



Haben wir etwas übersehen?

E-Mail an news@golem.de


Anzeige
Astrohaus Freewrite im Test: Schreibmaschine mit Cloud-Anschluss und GPL-Verstoß
Astrohaus Freewrite im Test
Schreibmaschine mit Cloud-Anschluss und GPL-Verstoß
  1. Cisco Global Cloud Index Bald sind 90 Prozent der Workloads in Cloud-Rechenzentren
  2. Cloud Computing Hyperkonvergenz packt das ganze Rechenzentrum in eine Kiste
  3. Cloud Computing Was ist eigentlich Software Defined Storage?

Senode: Eine ganze Komposition in zwei Graphen
Senode
Eine ganze Komposition in zwei Graphen
  1. Digitales Fernsehen Verbraucherschützer warnen vor falschen DVB-T2-Geräten
  2. Offlinemodus Netflix erlaubt Download ausgewählter Filme und Serien
  3. LG PH450UG LED-Kurzdistanzprojektor arbeitet mit Akku

HTC 10 Evo im Kurztest: HTCs eigenwillige Evolution
HTC 10 Evo im Kurztest
HTCs eigenwillige Evolution
  1. Virtual Reality HTC stellt Drahtlos-Kit für Vive vor
  2. Google Im Pixel steckt wohl mehr HTC als gedacht
  3. Desire 10 Lifestyle HTC stellt noch ein Mittelklasse-Smartphone für 300 Euro vor

  1. Re: 4000¤ - WTF?

    Nawo | 21:17

  2. Re: Ein Sprung in den Hyperspace macht knapp 90...

    Komischer_Phreak | 21:13

  3. Re: total spannend

    motzerator | 20:57

  4. Re: [OT] Golem pur Banner

    It's me, Mario | 20:52

  5. Re: Mehhh....

    User_x | 20:50


  1. 12:54

  2. 11:56

  3. 10:54

  4. 10:07

  5. 08:59

  6. 08:00

  7. 00:03

  8. 15:33


  1. Themen
  2. A
  3. B
  4. C
  5. D
  6. E
  7. F
  8. G
  9. H
  10. I
  11. J
  12. K
  13. L
  14. M
  15. N
  16. O
  17. P
  18. Q
  19. R
  20. S
  21. T
  22. U
  23. V
  24. W
  25. X
  26. Y
  27. Z
  28. #
 
    •  / 
    Zum Artikel