Abo
  • IT-Karriere:

Impala: Echtzeitabfragen mit Hadoop

Der Hadoop-Spezialist Cloudera hat mit Impala eine Lösung für Echtzeitabfragen auf Hadoop und HBase vorgestellt. Die Abfragen werden in SQL formuliert und sollen zehnmal schneller sein als mit Hive/Mapreduce.

Artikel veröffentlicht am ,
Echtzeitlösung auf Basis von Hadoop
Echtzeitlösung auf Basis von Hadoop (Bild: Cloudera)

Schnelle Ergebnisse auf Abfragen in SQL verspricht Cloudera mit Cloudera Enterprise RTQ. Die Software basiert auf Clouderas Open-Source-Projekt Impala, mit dem sich Daten in Echtzeit aus HDFS (Hadoop Distributed File System) und HBase auswerten lassen.

Stellenmarkt
  1. SICK AG, Waldkirch bei Freiburg im Breisgau
  2. Deloitte, Berlin, Düsseldorf, Hamburg

Cloudera will mit der neuen Lösung neue Einsatzgebiete für Hadoop erschließen, das ursprünglich als Offlinesystem für Batch-Verarbeitung ausgelegt war. Dabei soll Impala eine skalierbare, verteilte Query-Engine für Hadoop bereitstellen.

Entwickelt wurde Impala maßgeblich von Marcel Kornacker, der zuvor bereits einer der Architekten von Googles neuer Datenbank F1 war. Letztendlich erzeugt Impala ein flexibles Datenmodell, um effizienter als klassische Data-Warehouses mit komplexeren Daten umgehen zu können. Die Abfragen werden dabei mit SQL gestellt, die Daten liegen entweder in HDFS oder HBase vor. Abfragen mit Impala sollen durchschnittlich zehnmal schneller sein als mit Hive/Mapreduce.

Cloudera stellt Impala unter der Apache-Lizenz als Open Source zur Verfügung. Zudem hat Cloudera drei der Hauptentwickler von Apache HBase eingestellt, damit diese Clouderas Entwicklungen im Bereich Impala und HBase der Community zugänglich machen. Cloudera-Gründer Jeff Hammerbacher erklärte Impala zum aufregendsten Open-Source-Projekt seit Hadoop.



Anzeige
Top-Angebote
  1. (u. a. For Honor für 11,50€, Anno 1404 Königsedition für 3,74€, Anno 2070 Königsedition...
  2. (aktuell u. a. Cryorig Gehäuselüfter ab 7,49€, Sandisk Ultra 400-GB-microSDXC für 59,90€)
  3. (u. a. Total war - Three Kingdoms für 35,99€, Command & Conquer - The Ultimate Collection für 4...

schap23 24. Okt 2012

Interessant. Hadoop wurde doch immer bei der NoSQL-Bewegung genannt. Nun kann man da also...


Folgen Sie uns
       


OnePlus 7 Pro - Test

Das Oneplus 7 Pro hat uns im Test mit seiner guten Dreifachkamera, dem großen Display und einer gelungenen Mischung aus hochwertiger Hardware und gut laufender Software überzeugt.

OnePlus 7 Pro - Test Video aufrufen
Transport Fever 2 angespielt: Wachstum ist doch nicht alles
Transport Fever 2 angespielt
Wachstum ist doch nicht alles

Wesentlich mehr Umfang, bessere Übersicht dank neuer Benutzerführung und eine Kampagne mit 18 Missionen: Das Schweizer Entwicklerstudio Urban Games hat Golem.de das Aufbauspiel Transport Fever 2 vorgestellt - bei einer Bahnfahrt.
Von Achim Fehrenbach

  1. Mordhau angespielt Die mit dem Schwertknauf zuschlagen
  2. Bus Simulator angespielt Zwischen Bodenschwelle und Haltestelle
  3. Bright Memory angespielt Brachialer PC-Shooter aus China

FPM-Sicherheitslücke: Daten exfiltrieren mit Facebooks HHVM
FPM-Sicherheitslücke
Daten exfiltrieren mit Facebooks HHVM

Server für den sogenannten FastCGI Process Manager (FPM) können, wenn sie übers Internet erreichbar sind, unbefugten Zugriff auf Dateien eines Systems geben. Das betrifft vor allem HHVM von Facebook, bei PHP sind die Risiken geringer.
Eine Exklusivmeldung von Hanno Böck

  1. HHVM Facebooks PHP-Alternative erscheint ohne PHP

Dr. Mario World im Test: Spielspaß für Privatpatienten
Dr. Mario World im Test
Spielspaß für Privatpatienten

Schlimm süchtig machendes Gameplay, zuckersüße Grafik im typischen Nintendo-Stil und wunderbare Dudelmusik: Der Kampf von Dr. Mario World gegen böse Viren ist ein Mobile Game vom Feinsten - allerdings nur für Spieler mit gesunden Nerven oder tiefen Taschen.
Von Peter Steinlechner

  1. Mobile-Games-Auslese Ein Wunderjunge und dreimal kostenloser Mobilspaß
  2. Mobile-Games-Auslese Magischer Dieb trifft mogelnden Doktor
  3. Hyper Casual Games 30 Sekunden spielen, 30 Sekunden Werbung

    •  /