Abo
  • Services:

Cloudera veröffentlicht Hadoop-Distribution

RPM-basierte Distribution mit webbasiertem Konfigurationsassistenten

Die Installation und Konfiguration von Hadoop ist nicht ganz einfach. Um das zu ändern, bietet Cloudera seine Hadoop-Distribution ab sofort frei zum Download an. Das Apache-Projekt dient zur Verarbeitung großer Datenmengen auf verteilten Systemen und ist an Googles Map/Reduce-Engine angelehnt.

Artikel veröffentlicht am ,

Hadoop ist ein Java-Framework, das die Funktionen von Googles MapReduce und dem Google File System nachbildet, um große Mengen von Daten zu bearbeiten. Dafür besteht Hadoop aus dem Hadoop Distributed File System und einer Map/Reduce-Engine, die die Daten auf die einzelnen Knoten eines Clusters verteilt und Rechenaufgaben möglichst nah an den jeweiligen Daten abwickelt. So lassen sich sehr große Datenmengen, wie sie beispielsweise bei Internetsuchmaschinen anfallen, auf einem verteilten Cluster auswerten. Eingesetzt wird Hadoop unter anderem von Yahoo.

Stellenmarkt
  1. Hays AG, Raum Ludwigsburg
  2. Schwarz Zentrale Dienste KG, Heilbronn

Cloudera bietet kostenpflichtige Dienstleistungen rund um Hadoop an. Um die Verbreitung von Hadoop zu fördern, bietet das Unternehmen jetzt seine Hadoop-Distribution ab sofort zum freien Download an. Der Einsatz von Hadoop in Unternehmen soll dadurch vereinfacht werden.

Clouderas Hadoop-Distribution nutzt RPM zur Softwareverwaltung und liefert auch kompatible Versionen von Hive, ein Data Warehouse auf Basis von Hadoop, sowie Pig, eine von Yahoo-Research entwickelte parallele Programmiersprache, mit.

 

Ein webbasierter Konfigurationsassistent soll beim Finden der optimalen Hadoop-Parameter für den jeweiligen Einsatzzweck helfen.

Über ein öffentliches YUM-Repository stellt Cloudera zudem Pakete mit der aktuellen stabilen Version von Hadoop bereit. Die aktuelle Version der Distribution basiert auf Hadoop 0.18.3, wobei die mitgelieferten Hadoop-Pakete um zusätzlich stabile Funktionen künftiger Hadoop-Ausgaben sowie noch experimentelle Funktionen ergänzt wurde. Die von Cloudera dazu entwickelten Teile stehen alle unter der Apache License 2.0.

Clouderas Hadoop-Distribution steht unter cloudera.com/hadoop zum Download bereit.



Anzeige
Spiele-Angebote
  1. (-81%) 5,75€
  2. 25,99€
  3. (-56%) 10,99€
  4. 19,95€

Folgen Sie uns
       


Apple Pay ausprobiert

Dank Apple Pay können nun auch Nutzer in Deutschland kontaktlos mit ihrem iPhone bezahlen. Wir haben den Dienst bei unserem Lieblingscafé ausprobiert.

Apple Pay ausprobiert Video aufrufen
Gaming-Tastaturen im Test: Neue Switches für Gamer und Tipper
Gaming-Tastaturen im Test
Neue Switches für Gamer und Tipper

Corsair und Roccat haben neue Gaming-Tastaturen auf den Markt gebracht, die sich vor allem durch ihre Switches auszeichnen. Im Test zeigt sich, dass Roccats Titan Switch besser zum normalen Tippen geeignet ist, aber nicht an die Geschwindigkeit des Corsair-exklusiven Cherry-Switches herankommt.
Ein Test von Tobias Költzsch

  1. Azio RCK Retrotastatur wechselt zwischen Mac und Windows-Layout
  2. OLKB Planck im Test Winzig, gerade, programmierbar - gut!
  3. Alte gegen neue Model M Wenn die Knickfedern wohlig klackern

Sony-Kopfhörer WH-1000XM3 im Test: Eine Oase der Stille oder des puren Musikgenusses
Sony-Kopfhörer WH-1000XM3 im Test
Eine Oase der Stille oder des puren Musikgenusses

Wir haben die dritte Generation von Sonys Top-ANC-Kopfhörer getestet - vor allem bei der Geräuschreduktion hat sich einiges getan. Wer in lautem Getümmel seine Ruhe haben will, greift zum WH-1000XM3. Alle Nachteile der Vorgängermodelle hat Sony aber nicht behoben.
Ein Test von Ingo Pakalski


    Autonome Schiffe: Und abends geht der Kapitän nach Hause
    Autonome Schiffe
    Und abends geht der Kapitän nach Hause

    Weite Reisen in ferne Länder, eine Braut in jedem Hafen: Klischees über die Seefahrt täuschen darüber hinweg, dass diese ein Knochenjob ist. Doch in wenigen Jahren werden Schiffe ohne Besatzung fahren, überwacht von Steuerleuten, die nach dem Dienst zur Familie zurückkehren. Daran arbeitet etwa Rolls Royce.
    Ein Bericht von Werner Pluta

    1. Elektromobilität San Francisco soll ein Brennstoffzellenschiff bekommen
    2. Yara Birkeland Autonome Schiffe sind eine neue Art von Transportsystem
    3. Power Pac Strom aus dem Container für Ozeanriesen

      •  /