HTTP-Transfer: Curl lädt künftig URLs parallel

Das weltweit beliebte Download- und Transfer-Werkzeug Curl arbeitet in der kommenden Version verschiedene URLs parallel ab. Allerdings müssen Nutzer das explizit einstellen. Chefentwickler Stenberg freut sich über die Funktion, die nicht einmal 22 Jahre benötigt habe.

Artikel veröffentlicht am , Kristian Kißling/Linux Magazin/
Curl unterstützt künftig viele parallele Transfers.
Curl unterstützt künftig viele parallele Transfers. (Bild: Justin Sullivan, Getty Images)

Bereits seit der ersten Veröffentlichung im Jahre 1998 lässt sich das Multifunktionswerkzeug zum Dateitransfer Curl mit einer Liste von URLs benutzen, die das Tool dann nacheinander abarbeitet. Nun, "kaum 22 Jahre später", schreibt der Chefentwickler und Curl-Initiator Daniel Stenberg scherzhaft in seinem Blog, lädt Curl die Inhalte mehrerer URLs auch parallel herunter. Die Funktion selbst ist natürlich kein Scherz. Sie wird offiziell mit der stabilen Version 7.66.0 verfügbar sein, die am 11. September 2019 erscheinen soll.

Stellenmarkt
  1. Software Support Specialist (m/w/d)
    thinkproject Deutschland GmbH, München
  2. Produkt- und Projektmanager VOIS Plattform (m/w/d)
    ekom21 - KGRZ Hessen, Darmstadt, Gießen, Kassel
Detailsuche

Stenberg nennt auch die Begrenzungen der parallelen Arbeit des Werkzeugs. So funktioniere der parallele Download nur für verschiedene URLs, nicht aber für die Inhalte einer einzigen URL (Same File Splitting). Zudem lassen sich noch keine Statistiken für die einzelnen Downloads im Parallel-Szenario abrufen. Beides ließe sich in künftigen Versionen von Curl jedoch durchaus implementieren, versichert Stenberg. Der parallele Download werde zudem nicht als Standard eingeführt, Nutzer müssen diesen manuell aktivieren.

Um parallele Downloads zu starten, haben die Entwickler zwei Schalter, eine Langform und eine Kurzform, eingeführt: -parallel und -Z. Um die lokalen Sockets und die entfernten Server nicht zu überlasten, begrenzt das Tool die Zahl der Zugriffe standardmäßig auf 50. Über die Option -parallel-max kann die Zahl der möglichen Parallel-Downloads nach oben justiert werden. Den Fortschritt zeigt Curl dabei nicht für jeden einzelnen Download an, die Fortschrittsanzeige fasst alle Downloads zusammen.

Stenberg weist darüber hinaus darauf hin, dass diese Neuerung tatsächlich nur das viel genutzte Kommandozeilen-Werkzeug Curl betreffe. Die zugrunde liegende Bibliothek Libcurl habe mit der parallelen Übertragung auch bisher schon keine Probleme. Um die Funktion in Curl anzubieten, habe die Verwendung der Bibliothek lediglich angepasst werden müssen.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
Netflix
Warum so viele Serien nur zwei Staffeln lang laufen

Die Superhelden-Serie Jupiter's Legacy war bei ihrem Start ein Erfolg bei Netflix. Jetzt wurde sie eingestellt. Wie entscheidet Netflix, ob eine Serie verlängert wird?
Von Peter Osteried

Netflix: Warum so viele Serien nur zwei Staffeln lang laufen
Artikel
  1. Neues Betriebssystem von Microsoft: Wir probieren Windows 11 aus
    Neues Betriebssystem von Microsoft
    Wir probieren Windows 11 aus

    Windows 11 ist bereits im Umlauf. Wir haben die Vorabversion ausprobiert und ein schickes OS durchstöbert. Im Kern ist es aber Windows 10.
    Ein Hands-on von Oliver Nickel

  2. Elektroauto: Hochdach-Kombi Opel Combo-e Life ab 28.530 Euro erhältlich
    Elektroauto
    Hochdach-Kombi Opel Combo-e Life ab 28.530 Euro erhältlich

    Elektroautos als Kombi gibt es nicht? Doch: Der Opel Combo-e Life kann ab 28.530 Euro inklusive Förderung bestellt werden.

  3. Protest gegen VW: Polizei ermittelt gegen Greenpeace nach EM-Bruchlandung
    Protest gegen VW  
    Polizei ermittelt gegen Greenpeace nach EM-Bruchlandung

    Vor Anpfiff des EM-Spiels Deutschland-Frankreich ist ein Motorschirmflieger im Stadion gelandet: Greenpeace forderte den Verbrennerausstieg von VW.

/. 09. Aug 2019

The internet is for porn ... https://www.youtube.com/watch?v=j6eFNRKEROw


Folgen Sie uns
       


Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Schnäppchen • PS5 bei o2 mit Mobilfunkvertrag bestellbar • Breaking Deals bei MM (u. a. LG 75" Nanocell 8K 2.699€) • Xbox Series X bei MM bestellbar 499,99€ • Dualsense Midnight Black + Ratchet & Clank Rift Apart 99,99€ • PCGH Gaming-PC i7 RX 6800 XT 2.500€ [Werbung]
    •  /