Abo
  • IT-Karriere:

Cloudera veröffentlicht Hadoop-Distribution

RPM-basierte Distribution mit webbasiertem Konfigurationsassistenten

Die Installation und Konfiguration von Hadoop ist nicht ganz einfach. Um das zu ändern, bietet Cloudera seine Hadoop-Distribution ab sofort frei zum Download an. Das Apache-Projekt dient zur Verarbeitung großer Datenmengen auf verteilten Systemen und ist an Googles Map/Reduce-Engine angelehnt.

Artikel veröffentlicht am ,

Hadoop ist ein Java-Framework, das die Funktionen von Googles MapReduce und dem Google File System nachbildet, um große Mengen von Daten zu bearbeiten. Dafür besteht Hadoop aus dem Hadoop Distributed File System und einer Map/Reduce-Engine, die die Daten auf die einzelnen Knoten eines Clusters verteilt und Rechenaufgaben möglichst nah an den jeweiligen Daten abwickelt. So lassen sich sehr große Datenmengen, wie sie beispielsweise bei Internetsuchmaschinen anfallen, auf einem verteilten Cluster auswerten. Eingesetzt wird Hadoop unter anderem von Yahoo.

Stellenmarkt
  1. MVV Trading GmbH, Mannheim
  2. ENGAGEMENT GLOBAL gGmbH, Bonn

Cloudera bietet kostenpflichtige Dienstleistungen rund um Hadoop an. Um die Verbreitung von Hadoop zu fördern, bietet das Unternehmen jetzt seine Hadoop-Distribution ab sofort zum freien Download an. Der Einsatz von Hadoop in Unternehmen soll dadurch vereinfacht werden.

Clouderas Hadoop-Distribution nutzt RPM zur Softwareverwaltung und liefert auch kompatible Versionen von Hive, ein Data Warehouse auf Basis von Hadoop, sowie Pig, eine von Yahoo-Research entwickelte parallele Programmiersprache, mit.

 

Ein webbasierter Konfigurationsassistent soll beim Finden der optimalen Hadoop-Parameter für den jeweiligen Einsatzzweck helfen.

Über ein öffentliches YUM-Repository stellt Cloudera zudem Pakete mit der aktuellen stabilen Version von Hadoop bereit. Die aktuelle Version der Distribution basiert auf Hadoop 0.18.3, wobei die mitgelieferten Hadoop-Pakete um zusätzlich stabile Funktionen künftiger Hadoop-Ausgaben sowie noch experimentelle Funktionen ergänzt wurde. Die von Cloudera dazu entwickelten Teile stehen alle unter der Apache License 2.0.

Clouderas Hadoop-Distribution steht unter cloudera.com/hadoop zum Download bereit.



Anzeige
Hardware-Angebote
  1. 529,00€ (zzgl. Versand)
  2. 199,90€

Folgen Sie uns
       


Raspberry Pi 4B vorgestellt

Nicht jedem dürften die Änderungen gefallen: Denn zwangsläufig wird auch neues Zubehör fällig.

Raspberry Pi 4B vorgestellt Video aufrufen
Faire IT: Die grüne Challenge
Faire IT
Die grüne Challenge

Kann man IT-Produkte nachhaltig gestalten? Drei Startups zeigen, dass es nicht so einfach ist, die grüne Maus oder das faire Smartphone auf den Markt zu bringen.
Von Christiane Schulzki-Haddouti

  1. Smartphones Samsung und Xiaomi profitieren in Europa von Huawei-Boykott
  2. Smartphones Xiaomi ist kurz davor, Apple zu überholen
  3. Niederlande Notrufnummer fällt für mehrere Stunden aus

Erdbeobachtung: Satelliten im Dienst der erneuerbaren Energien
Erdbeobachtung
Satelliten im Dienst der erneuerbaren Energien

Von oben ist der Blick auf die Erde am besten. Satelliten werden deshalb für die Energiewende eingesetzt: Mit ihnen lassen sich beispielsweise die Standorte für Windkraftwerke oder Solaranlagen bestimmen sowie deren Ertrag prognostizieren.
Ein Bericht von Jan Oliver Löfken

  1. Rocketlab Kleine Rakete wird wiederverwendbar und trotzdem teurer
  2. Space Data Highway Esa bereitet Laser-Kommunikationsstation für den Start vor
  3. Iridium Certus Satelliten-Breitbandnetz startet mit 350 bis 700 KBit/s

Mobile Payment: Mit QR-Code-Kooperation zum europäischen Standard
Mobile Payment
Mit QR-Code-Kooperation zum europäischen Standard

Die Mobile Wallet Collaboration will ein einheitliches QR-Format als technische Grundlage für ein vereinfachtes Handling etablieren. Die Allianz aus sechs europäischen Bezahldiensten und Alipay aus China ist eine ernstzunehmende Konkurrenz für Google, Apple, Facebook, Amazon.
Von Sabine T. Ruh


      •  /