Big Data

Dem Apache-Projekt CouchDB geht es gut, schreibt Projektleiter Jan Lehnardt in einer E-Mail, nachdem Ubuntu-Sponsor Canonical angekündigt hat, bei seinem Cloudspeicher Ubuntu One künftig auf CouchDB zu verzichten.

Der Cloudspeicher Ubuntu One wird künftig weder CouchDB noch Desktopcouch unterstützen. Aus Zeitmangel wird die neue Implementierung in Ubuntu 12.04 die Synchronisierung bestimmter Daten eventuell nicht leisten können.

Unter dem Namen Precise Pangolin soll im April 2012 Ubuntu 12.04 LTS erscheinen. Die Neuerungen der letzten beiden Ubuntu-Versionen sollen optimiert, die Linux-Distribution selbst soll auf Stabilität getrimmt werden.

Windows will die NoSQL-Datenbank Hadoop in seine Cloud-Dienste integrieren. Später soll Hadoop auch auf Windows Server laufen.

Canonical hat für Ubuntu 11.10 die Oberfläche Unity verschönert. Für Ubuntu-Nutzer, die sich nicht mit dem Konzept von Unity anfreunden können, steht die direkte Konkurrenz der Gnome-Shell ebenfalls zur Verfügung.

Auf seiner Hausmesse Oracle Open World hat Oracle den Big Data Appliance vorgestellt, ein System speziell zur Analyse großer Datenmengen. Dabei kommt neben Hadoop eine NoSQL-Datenbank zum Einsatz: die Oracle NoSQL Database.

Das von ehemaligen Akamai-Entwicklern gegründete Unternehmen Basho kündigt die Version 1.0 seiner freien NoSQL-Datenbank Riak an. Riak-Datenbanken lassen sich leicht auf mehrere Server verteilen und versprechen hohe Fehlertoleranz und Verfügbarkeit.

Viele haben die VZ-Netzwerke SchülerVZ, StudiVZ und MeinVZ angesichts der Übermacht von Facebook und sinkender Reichweite schon abgeschrieben, doch das Berliner Unternehmen will es mit Google-Technik noch einmal versuchen. Nutzer sollen die neuen VZs mitgestalten.

Twitter will das von Backtype entwickelte System Storm als Open Source freigeben. Dabei handelt es sich um ein verteiltes, verlässliches und fehlertolerantes System zur Verarbeitung von Datenströmen, das Backtype als eine Art Hadoop für Echtzeitdaten bezeichnet.

Die Entwickler von SQLite und CouchDB haben sich zusammengetan und mit der Unstructured Data Query Language, kurz UnQL (gesprochen "Uncle") eine Abfragesprache für NoSQL-Datenbanken zu entwickeln, deren Syntax an SQL angelehnt ist.

O'Reilly startet einen europäischen Ableger seiner Konferenz Velocity in Berlin. Die bisher in den USA und China veranstaltete Konferenz widmet sich den Themen Web Performance und Operations.

Mit LevelDB hat Google eine schnelle Storage-Engine für Key-Value-Paare unter einer BSD-Lizenz als Open Source veröffentlicht. In Google Benchmarks ist LevelDB deutlich schneller als SQLite und Kyoto Cabinet.

In einer weiteren Vorabversion der Datenbank MySQL 5.6.3 kann die InnoDB-Engine auch zur Volltextsuche genutzt werden. Über die Binlog-API können externe Anwendungen auf die Binärlogs der Datenbank zugreifen.

Twitter übernimmt das auf Echtzeitanalysen spezialisierte Unternehmen Backtype. Wie so oft bei solchen Übernahmen werden die Produkte von Backtype nicht länger angeboten.

Yahoo will um Apache Hadoop eine eigene Firma gründen: Hortonworks soll Hadoop-Entwickler aufnehmen und sich mit Support sowie Training finanzieren. Die Plattform soll weiterhin als Open-Source-Software angeboten werden.

Der Datenspezialist Lexisnexis will High Performance Computing Cluster (HPCC) als Open Source freigeben und damit eine Alternative zu Apache Hadoop schaffen. HPCC soll Unternehmen helfen, Probleme mit großen Datenmengen zu lösen.

Ein namhafter Entwickler hat Google verlassen und bezeichnet Softwaretools des Konzerns wie Protocol Buffers, Bigtable und Mapreduce als veraltet. Dhanji Prasanna war im Google-Wave-Team und vertrat Google in mehreren Java-Expertengruppen.

Für die NoSQL-Datenbank MongoDB haben die Entwickler eine Browserschnittstelle für Datenbankabfragen unter dem Namen Mongs vorgestellt. Datensätze können im Browser per JSON abgefragt werden.

Das US-Startup Hexagram 49 hat seine auf SSDs optimierte NoSQL-Datenbank RethinkDB in der Version 1.0 veröffentlicht. Sie soll linear mit der Zahl der Kerne skalieren, auf SSDs zehnmal schneller sein als herkömmliche Datenbanken und nach einem Stromausfall sofort wieder verfügbar sein.

Die auf dokumentenorientierte Daten ausgelegte NoSQL-Datenbank Apache CouchDB ist in der Version 1.1.0 erschienen. Die in Erlang geschriebene Software hat in der neuen Version unter anderem native SSL-Unterstützung.

Dank einer neuen modularen Architektur soll die GraphDB von Sones graphenspezifische Anfragen in der Version 2.0 deutlich schneller abwickeln als bisher.

Das Open-Source-Projekt Mediagoblin will Benutzern eine freie Alternative zu Flickr, Youtube und Co. zur Verfügung stellen. Ein fünfköpfiges Gründungsteam will in den nächsten acht Monaten die Infrastruktur für den Webdienst stabilisieren und dann anbieten.

Red Hats Openshift soll die Entwicklung von Open-Source-Anwendungen für die Cloud vereinfachen. Die Plattform-as-a-Service soll eine Infrastruktur bereitstellen, in der die Entwicklungsframeworks Java und Python angeboten werden.

Mit JBoss Enterprise Data Grid 6 hat Red Hat einen verteilten Datencache vorgestellt und in einem Early-Access-Programm zur Verfügung gestellt. Die Technik basiert unter anderem auf NoSQL-Techniken, die auch in Amazons Dynamo eingesetzt werden.

Die freie Graph-Datenbank Neo4j ist in der Version 1.3 veröffentlicht worden. Die neue Version mit Codenamen "Abisko Lampa" bietet zahlreiche neue Funktionen, unterstützt größere Datenbanken und steht nun unter der GPLv3.

Die Datenbank MySQL 5.6 soll mit einer Mischung aus Memcached und InnoDB ein wenig NoSQL lernen. Zudem haben die Entwickler bei Oracle den Abfragenoptimierer beschleunigt. Die Entwicklerversion der Datenbank steht zum Testen bereit.

Im Web zählen Googles Crawler inzwischen über 31 Millionen Open-Source-Projekte. Fast die Hälfte davon verwenden die GPL. Google selbst bevorzugt die Apache-Lizenz.

10gen hat seine freie NoSQL-Datenbank MongoDB in der Version 1.8 veröffentlicht. Diese unterstützt unter anderem Journaling für eine schnelle Wiederherstellung.

Die Betreiber des Hostingservices Sourceforge veröffentlichen ihre eigene Software Allura unter der Apache-Lizenz 2.0. Allura ist die quelloffene Implementierung des Dienstes, den Sourceforge anbietet.

Unter den Namen Mobile Couchbase hat das CouchDB-Team seine Nosql-Datenbank für Apples App Store zertifizieren lassen. Nun lädt es Entwickler ein, seine Datenbank zu verwenden.

Die Graph-Datenbank Neo4j nähert sich der Version 1.3 alias "Abisko Lampa". Der aktuelle Milestone 4 bringt Unterstützung für größere Datenbanken, ein verbessertes REST-API und soll stabiler unter Windows laufen.

Die beiden NoSQL-Anbieter Membase und Couchone fusionieren zum neuen Unternehmen Couchbase. Während sich Membase auf Memcached-Lösungen spezialisiert hat, setzt Couchon auf Apache CouchDB.

Yahoo gibt seine eigene Hadoop-Distribution auf und will sich künftig stärker an Apache Hadoop beteiligen.

Die Konferenzen Berlin Buzzwords und Re:publica suchen nach Vorträgen. Während sich die Re:publica Themen wie Blogs, soziale Medien und digitale Gesellschaft widmet, geht es bei der Berlin Buzzwords um skalierbare Suche, Datenanalyse, Cloud Computing und NoSQL.

Cloudant bietet unter dem Namen Cloudant Search eine Volltextindizierung und Suche für seinen CouchDB-basierten Speicherdienst an, die über eine REST-API angesprochen werden kann. Sie verspricht Suchergebnisse in Echtzeit und liefert diese im JSON-Format zurück.

Das PHP-Framework Fuel soll die Entwicklungszeiten durch eine aufgeräumte Syntax verkürzen und äußerst portabel sein. Das Fuel-Team hat eine erste Vorabversion veröffentlicht.

Der Speicherdienst in der Ubuntu-Cloud soll auch Windows-Anwendern zur Verfügung gestellt werden. Eine Vorabversion der Client-Software für Windows ermöglicht zunächst den Austausch von Dateien zwischen Windows und Ubuntu.

Pünktlich hat das Diaspora-Team eine Entwicklerversion des freien sozialen Netzwerks veröffentlicht. Diaspora soll mit Hilfe der Gemeinschaft reifen. Für die nächste Alphaversion im Oktober ist eine Facebook-Integration geplant - und Übersetzungen.

Mit seiner NoSQL-Datenbank CouchDB will das Unternehmen CouchOne auch auf mobile Geräte und in die Wolke. CouchOne Mobile ist bereits auf die Android-Plattform portiert und soll später auch unter iOS funktionieren.

Die NoSQL-Datenbank Redis 2.0 bringt mit der sogenannten Multi/Exec-Funktion die Möglichkeit, mehrere Befehle in einem Block zusammenzufassen. Mit dem eigenen virtuellen Speicher kann die Datenbank die Begrenzung des physischen Arbeitsspeichers umgehen.

Google Wave wird nicht mehr weiterentwickelt, aber die Idee dahinter soll als Open-Source-Projekt weiterleben. Dazu will Google weitere Teile des Wave-Codes freigeben und mit Wave in a Box ein Paket anbieten, mit dem jeder eigene Wave-Server aufsetzen kann.

Nachdem ein Fehler in der NoSQL-Datenbank CouchDB unter Umständen zu Datenverlust führen kann, arbeiten die Entwickler mit Hochdruck an einem Werkzeug, um eventuell verloren gegangene Daten zu retten.

Ein Fehler in der aktuellen Version 1.0.0 der NoSQL-Datenbank CouchDB könnte zu Datenverlust führen, sagen die Entwickler. Ein Workaround gibt es bereits. Der Datenverlust droht, wenn die Datenbank neu gestartet wird, ohne die Daten zuvor zu sichern. Eine fehlerbereinigte Version soll in wenigen Tagen erscheinen.