• IT-Karriere:
  • Services:

Apache Drill: Riesige Datenmengen werden schneller verarbeitet

Mit Drill soll die Abfrage und Analyse riesiger Datenmengen beschleunigt werden. Drill soll ein Incubator-Projekt der ASF werden und basiert auf dem Konzept des Google-Werkzeugs Dremel, welches das Unternehmen intern einsetzt.

Artikel veröffentlicht am ,
Drill soll als Incubator-Projekt entwickelt werden.
Drill soll als Incubator-Projekt entwickelt werden. (Bild: Apache Software Foundation)

Zur Verwaltung riesiger Datenmengen nutzen viele Unternehmen Apache Hadoop, zur Analyse der Daten wird dann meist Mapreduce verwendet. Die Analyse ist jedoch bei bestimmten Anwendungen schlicht zu langsam, weshalb Google intern die Eigenentwicklung Dremel nutzt. Drill erweitert das frei zugängliche Dremel-Konzept leicht und soll zunächst als Incubator-Projekt der Apache-Foundation entwickelt werden.

Stellenmarkt
  1. BRZ Deutschland GmbH, Nürnberg
  2. Deutsche Rentenversicherung Bund, Berlin

Zusätzlich zu den SQL-ähnlichen Sprachen, die Dremel und Google Bigquery nutzen, soll Drill weitere Abfragesprachen unterstützen, etwa jene, die in MongoDB verwendet wird. Ebenso soll Drill mit mehr Datenformaten umgehen können als Dremel. Insbesondere sollen sowohl spalten- als auch zeilenbasierte Formate unterstützt werden. Als Quellen für die Daten wird zunächst Hadoop eingesetzt.

Die ersten Arbeiten an der Implementierung stammen von dem Hadoop-Distributor Mapr. Mit der Übergabe des Quellcodes an die Apache-Sofware-Foundation sollen eine größere Entwicklercommunity und Synergien mit den Hadoop-Entwicklern entstehen.

Es ist sehr wahrscheinlich, dass Drill in das Incubator-Projekt der Apache-Software-Foundation aufgenommen wird.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Anzeige
Top-Angebote
  1. (u. a. PS4 Pro Naughty Dog Bundle für 399,99€, PS4 VR Megapack Ed. 2 für 279,99€, Death...
  2. (Samsung Galaxy A51 128 GB für 299,00€)
  3. (aktuell u. a. WD Eements 10 TB für 179,00€, Crucial X8 1 TB externe SSD für 149,00€, Zotac...
  4. (aktuell u. a. Dell XPS 15 Gaming-Notebook für 2.249,00€, Asus TUF Gaming-Laptop für 599,00€)

Folgen Sie uns
       


Asus-Gaming-Monitor mit 43 Zoll Diagonale - Test

Zwar ist der PG43UQ mit seinen 43 Zoll noch immer ziemlich riesig, er passt aber zumindest noch gut auf den Schreibtisch. Und dort überrascht der Asus-Monitor mit einer guten Farbdarstellung und hoher Helligkeit.

Asus-Gaming-Monitor mit 43 Zoll Diagonale - Test Video aufrufen
Golem Akademie: IT-Sicherheit für Webentwickler als Live-Webinar
Golem Akademie
"IT-Sicherheit für Webentwickler" als Live-Webinar

Wegen der Corona-Pandemie findet unser Workshop zur IT-Sicherheit für Webentwickler nicht als Präsenzseminar, sondern im Netz statt: in einem Live-Webinar Ende April mit Golem.de-Redakteur und IT-Sicherheitsexperte Hanno Böck.

  1. Golem Akademie Zeitmanagement für IT-Profis
  2. Golem Akademie IT-Sicherheit für Webentwickler
  3. In eigener Sache Golem-pur-Nutzer erhalten Rabatt für unsere Workshops

Lkw-Steuerung: Der ferngesteuerte Lastwagen
Lkw-Steuerung
Der ferngesteuerte Lastwagen

Noch steuern den automatisierten Lastwagen T-Pod Entwickler, die Lkw-Fahren gelernt haben. Jetzt wird erstmals der umgekehrte Fall getestet - um das System kommerziell zu machen.
Ein Bericht von Werner Pluta

  1. Starsky Robotics Woran ein Startup für autonome Lkw gescheitert ist
  2. Neue Prioritäten Daimler setzt beim autonomen Fahren zuerst auf Lkw
  3. Autonomes Fahren AutoX und Fiat planen autonome Taxis in China

Coronakrise: Welche Hilfen IT-Freelancer bekommen
Coronakrise
Welche Hilfen IT-Freelancer bekommen

Das Hilfspaket des Bundes in Milliardenhöhe sieht kaum Leistungen vor, mit denen IT-Freelancer etwas anfangen können. Den Bitkom empört das nicht.
Ein Bericht von Gerd Mischler

  1. IT-Chefs aus Indien Mehr als nur ein Klischee
  2. Jobporträt Softwaretester "Ein gesunder Pessimismus hilft"
  3. Frauen in der IT Software-Entwicklung ist nicht nur Männersache

    •  /