• IT-Karriere:
  • Services:

HTTP-Transfer: Curl lädt künftig URLs parallel

Das weltweit beliebte Download- und Transfer-Werkzeug Curl arbeitet in der kommenden Version verschiedene URLs parallel ab. Allerdings müssen Nutzer das explizit einstellen. Chefentwickler Stenberg freut sich über die Funktion, die nicht einmal 22 Jahre benötigt habe.

Artikel veröffentlicht am , Kristian Kißling/Linux Magazin/
Curl unterstützt künftig viele parallele Transfers.
Curl unterstützt künftig viele parallele Transfers. (Bild: Justin Sullivan, Getty Images)

Bereits seit der ersten Veröffentlichung im Jahre 1998 lässt sich das Multifunktionswerkzeug zum Dateitransfer Curl mit einer Liste von URLs benutzen, die das Tool dann nacheinander abarbeitet. Nun, "kaum 22 Jahre später", schreibt der Chefentwickler und Curl-Initiator Daniel Stenberg scherzhaft in seinem Blog, lädt Curl die Inhalte mehrerer URLs auch parallel herunter. Die Funktion selbst ist natürlich kein Scherz. Sie wird offiziell mit der stabilen Version 7.66.0 verfügbar sein, die am 11. September 2019 erscheinen soll.

Stellenmarkt
  1. WFB Wirtschaftsförderung Bremen GmbH, Bremen
  2. operational services GmbH & Co. KG, Braunschweig

Stenberg nennt auch die Begrenzungen der parallelen Arbeit des Werkzeugs. So funktioniere der parallele Download nur für verschiedene URLs, nicht aber für die Inhalte einer einzigen URL (Same File Splitting). Zudem lassen sich noch keine Statistiken für die einzelnen Downloads im Parallel-Szenario abrufen. Beides ließe sich in künftigen Versionen von Curl jedoch durchaus implementieren, versichert Stenberg. Der parallele Download werde zudem nicht als Standard eingeführt, Nutzer müssen diesen manuell aktivieren.

Um parallele Downloads zu starten, haben die Entwickler zwei Schalter, eine Langform und eine Kurzform, eingeführt: -parallel und -Z. Um die lokalen Sockets und die entfernten Server nicht zu überlasten, begrenzt das Tool die Zahl der Zugriffe standardmäßig auf 50. Über die Option -parallel-max kann die Zahl der möglichen Parallel-Downloads nach oben justiert werden. Den Fortschritt zeigt Curl dabei nicht für jeden einzelnen Download an, die Fortschrittsanzeige fasst alle Downloads zusammen.

Stenberg weist darüber hinaus darauf hin, dass diese Neuerung tatsächlich nur das viel genutzte Kommandozeilen-Werkzeug Curl betreffe. Die zugrunde liegende Bibliothek Libcurl habe mit der parallelen Übertragung auch bisher schon keine Probleme. Um die Funktion in Curl anzubieten, habe die Verwendung der Bibliothek lediglich angepasst werden müssen.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Anzeige
Top-Angebote
  1. (u. a. HP Pavilion 32 Zoll Monitor für 229,00€, Steelseries Arctis Pro wireless Headset für 279...
  2. ab 62,99€
  3. (aktuell u. a. HyperX Alloy Elite RGB Tastatur für 109,90€, Netgear EX7700 Nighthawk X6 Repeater)

/. 09. Aug 2019

The internet is for porn ... https://www.youtube.com/watch?v=j6eFNRKEROw


Folgen Sie uns
       


SSD-Kompendium

Sie werden alle SSDs genannt und doch gibt es gravierende Unterschiede. Golem.de-Hardware-Redakteur Marc Sauter stellt die unterschiedlichen Formfaktoren vor, spricht über Protokolle, die Geschwindigkeit und den Preis.

SSD-Kompendium Video aufrufen
Social Engineering: Die Mitarbeiter sind unsere Verteidigung
Social Engineering
"Die Mitarbeiter sind unsere Verteidigung"

Prävention reicht nicht gegen Social Engineering und die derzeitigen Trainings sind nutzlos, sagt der Sophos-Sicherheitsexperte Chester Wisniewski. Seine Lösung: Mitarbeiter je nach Bedrohungslevel schulen - und so schneller sein als die Kriminellen.
Ein Interview von Moritz Tremmel

  1. Social Engineering Mit künstlicher Intelligenz 220.000 Euro erbeutet
  2. Social Engineering Die unterschätzte Gefahr

Surface Laptop 3 (15 Zoll) im Test: Das 15-Zoll-Macbook mit Windows 10 und Ryzen
Surface Laptop 3 (15 Zoll) im Test
Das 15-Zoll-Macbook mit Windows 10 und Ryzen

Was passiert, wenn ein 13-Zoll-Notebook ein 15-Zoll-Panel erhält? Es entsteht der Surface Laptop 3. Er ist leicht, sehr gut verarbeitet und hat eine exzellente Tastatur. Das bereitet aber nur Freude, wenn wir die wenigen Anschlüsse und den recht kleinen Akku verkraften können.
Ein Test von Oliver Nickel

  1. Surface Laptop 3 mit 15 Zoll Microsoft könnte achtkernigen Ryzen verbauen

Von Microsoft zu Linux und zurück: Es gab bei Limux keine unlösbaren Probleme
Von Microsoft zu Linux und zurück
"Es gab bei Limux keine unlösbaren Probleme"

Aus Ärger über Microsoft stieß er den Wechsel der Stadt München auf Linux an. Kaum schied er aus dem Amt des Oberbürgermeisters, wurde Limux rückgängig gemacht. Christian Ude über Seelenmassage von Ballmer und Gates, die industriefreundliche CSU, eine abtrünnige Grüne und umfallende SPD-Genossen.
Ein Interview von Jan Kleinert


      •  /