Hadoop-Cluster als Live-CD

OpenSolaris als Betriebssystem. Die OpenSolaris-Community hat eine Live-CD mit einem Hadoop-Cluster veröffentlicht. Vom Start bis zum voll einsatzbereiten Cluster sollen dabei nur etwa 15 Minuten vergehen. Zudem soll sich die Software mit verhältnismäßig geringen Ressourcen ausprobieren lassen.

5. September 2008 um 10:24 Uhr / Julius Stiebert

Als Basis dient OpenSolaris, auf dem Apache Hadoop 0.17 eingerichtet ist. Vorkonfiguriert ist bereits ein Cluster mit drei Knoten, wobei Solaris Zones verwendet werden, um diese Knoten auf demselben Computer laufen zu lassen. Die zwei virtuellen Zonen werden beim Starten automatisch angelegt.

Da es sich um eine Live-CD handelt, werden keine Daten auf die Festplatte geschrieben. Das Projekt hofft damit, mehr Anwender dazu zu bringen, Hadoop auszuprobieren. Die Live-CD läuft auf x86-Computern und benötigt mindestens 1 GByte RAM. Damit soll sich Hadoop auf jedem aktuellen Rechner ohne Probleme testen lassen.

Hadoop ist ein Java-Framework, das die Funktionen von Googles MapReduce und dem Google File System nachbildet, um große Mengen von Daten zu bearbeiten. Dafür besteht Hadoop aus dem Hadoop Distributed File System und einer Map/Reduce-Engine, die die Daten auf die einzelnen Knoten eines Clusters verteilt.