Big Data

Revolution Analytics erweitert seine auf der freien Programmiersprache R basierende statistische Analysesoftware um Unterstützung für große Datenmengen. Damit wird es möglich, mit R Daten aus Hadoop oder NoSQL-Datenbanken gezielt zu analysieren.

Die nicht-relationale verteilte Datenbank Hibari wird unter die freie Apache Lizenz 2.0 gestellt. Hibari ist aufgrund seiner Geschwindigkeit und Skalierbarkeit für das Speichern großer Datenmengen geeignet, beispielsweise telemetrische Daten oder Logfiles. Hibari wurde in der Programmiersprache Erlang implementiert und bringt zahlreiche APIs mit, darunter solche für Amazons S3.

Die Apache Software Foundation (ASF) hat auf einen Schlag sechs neue Top-Level-Projekte angekündigt, ein Rekord für die Organisation. Dazu zählt der Apache Traffic Server ebenso wie die Projekte Mahout, Tika, Nutch, Avro und HBase.

Unternehmen für Dienstleistungen rund um das NoSQL-System. Cassandra-Entwickler Jonathan Ellis hat mit Matt Pfeil das Unternehmen Riptano gegründet, das Dienstleistungen rund um Apaches freies NoSQL-System anbieten soll.

Ubuntu 10.04 LTS integriert soziale Netzwerke. Das aktuelle Ubuntu 10.04 LTS überrascht mit neuem Aussehen und weitreichender Anbindung an soziale Netzwerke. Die Bildbearbeitung Gimp weicht der Bildverwaltung F-Spot und dem Filmeditor Pitivi. Als LTS-Version veröffentlicht, soll Lucid Lynx drei Jahre lang gepflegt werden.

Patentlizenz für freie Implementierung von Googles Mapreduce-Algorithmus. Das Apache-Projekt Hadoop verstößt möglicherweise gegen ein Patent von Google, doch das will Google nicht gegen die Open-Source-Projekte ins Feld führen. Damit ist ein wesentlicher Unsicherheitsfaktor des Projekts aus der Welt.

30 Prozent schneller, mi Zeilencache und Hadoop-Unterstützung. Die von Facebook entwickelte und an die Apache Software Foundation übergebene NoSQL-Datenbank Cassandra wurde in der Version 0.6.0 veröffentlicht. Es ist die erste Cassandra-Ausgabe als Apache-Top-Level-Projekt.

Canonicals Cloud-Dienst gleicht mit PhoneSync Kontaktdaten per Funambol ab. Canonical will seinen Cloud-Dienst um die Synchronisierung von Kontaktdaten mit mobilen Geräten erweitern. Der Dienst soll Benutzern mit einem kostenpflichtigen Abonnement für Ubuntu One zur Verfügung stehen und wird mit dem Erscheinen von Ubuntu 10.04 freigeschaltet.

NoSQL-Datenbank Cassandra verlässt den Incubator. Die Apache Software Foundation entlässt die NoSQL-Datenbank Cassandra aus dem Incubator, in dem zuvor eingereichte Projekte einer Prüfung unterzogen werden. Ab sofort gilt die verteilte Datenbank als Top-Level-Projekt.

Microblogging-Dienst stellt seine quelloffenen Projekte vor. Auf einer eigens dafür geschaffenen Webseite stellt Twitter die Open-Source-Projekte vor, die der Anbieter für seine Microblogging-Dienste verwendet. Darunter befindet sich Ruby-Gems sowie Java-Anwendungen, die dort auch per Git zum Download freigegeben wurden.

Forschungschip benötigt zwischen 25 und 125 Watt. Singlechip Cloud Computer (SCC) nennt Intel seinen neuen Prozessor, der über 48 Kerne verfügt und den Weg hin zu Many-Core-Prozessoren ebnen soll. Dank feiner Stromsparfunktionen liegt die Leistungsaufnahme des Chips zwischen 25 und 125 Watt.

Cloud-Computing-Software als Open Source freigegeben. Die von Yahoo seit mehreren Jahren entwickelte und eingesetzte Software Traffic Server geht als Spende an die Apache Software Foundation. Die Software kümmert sich um Session-Management, Authentifizierungen, Konfigurationsmanagement, Load-Balancing und Routing für eine komplette Servergruppe, die zu einer Cloud vernetzt wurde.

Auch Mozilla will die Kommunikation im Internet revolutionieren. Nicht nur Google will mit Wave die Art und Weise, wie Menschen über das Internet kommunizieren, neu erfinden. Auch Mozilla schickt sich an, die Kommunikation im Netz umzukrempeln und stellt das Projekt Raindrop vor. Gleichzeitig veröffentlicht Mozilla einen ersten Prototypen.

30.000 Server, 25 TByte Logfile täglich und 600.000 Fotos pro Sekunde. Facebook ist groß, in jeder Dimension. Das sagt Jeff Rothschild, Vice President für Technologie bei Facebook bei einer Präsentation an der Universität San Diego und unterlegte dies mit Zahlen. Rothschild erläuterte die Architektur hinter Facebook und sprach über künftige technische Herausforderungen.

Datei- und Jobbrowser, Cluster Health und Jobdesigner veröffentlicht. Der Hadoop-Spezialist Cloudera hat mit dem Cloudera Desktop eine GUI für Apache Hadoop vorgestellt. Mit der kostenlosen Software lassen sich Applikationen auf öffentlichen und privaten Hadoop-Clustern administrieren und überwachen.

Forscher haben Data-Mining-Tool SNAzzy entwickelt. IBM bietet Mobilfunkbetreibern das Tool SNAzzy an. Es analysiert die Kommunikationsdatensätze der Kunden, um soziale Netzwerke aufzuspüren. Wechselt einer der Nutzer den Netzbetreiber, kann die Marketingabteilung versuchen, mit Lockangeboten einen Wechsel eines ganzen Freundeskreises zu verhindern.

PHP-Erfinder will Yahoo verlassen. Die Zusammenarbeit mit Microsoft, in deren Rahmen Yahoo künftig die eigene Suchmaschine durch Microsofts Bing ersetzen will, soll keine negativen Auswirkungen auf Yahoos Hadoop-Engagement haben. Hadoop sei weiterhin wichtig.

Skalierbar und robust wie Hadoop, so schnell wie eine parallele Datenbank. Die Skalierbarkeit von Hadoop, kombiniert mit der Geschwindigkeit eines parallelen Datenbanksystems. Das soll HadoopDB bieten - ein freies paralleles shared-nothing Datenbanksystem, das mit einer an SQL angelehnten Sprache abgefragt werden kann.

Erweiterung der Talend Integration Suite. Talend hat seine Datenintegrationssoftware um eine Echtzeitlösung erweitert. Die soll mit vorhandenen SOA-Lösungen zusammenarbeiten und ist plattformunabhängig.

Ausgiebig getestete und erweiterte Hadoop-Version ausschließlich im Quelltext. Yahoo hat eine eigene Distribution von Apache Hadoop angekündigt. Die bei Yahoo intern eingesetzte Hadoop-Version stellt das Unternehmen Dritten im Quelltext zur Verfügung.

Anbieter erweitert seine Datenintegrationsplattform. Talend hat die neue Produktlinie "Talend Integration Suite MPX" für die parallele Datenverarbeitung vorgestellt und verspricht hohe Leistungen bei großem Datenaufkommen. Die Software ist kompatibel zu Talends Open Studio, versteht sich aber als Enterprise-Lösung, die nicht Open Source ist.

Neuer Webservice von Amazon nutzt EC2 und S3. Amazon bietet mit seinem neuen Dienst Amazon Elastic MapReduce einen Hadoop-Cluster zum Mieten an. Damit lassen sich große Datenmengen auf verteilten Systemen verarbeiten.

Data-Mining-Software weiter verbessert. Die freie Data-Mining-Lösung RapidMiner korrigiert in der Version 4.4 etliche Fehler und bringt einige neue Funktionen zur Datenverarbeitung mit. Die Software ist in einer kostenlosen Community Edition verfügbar, es gibt aber auch erweiterte kommerzielle Lizenzen.

RPM-basierte Distribution mit webbasiertem Konfigurationsassistenten. Die Installation und Konfiguration von Hadoop ist nicht ganz einfach. Um das zu ändern, bietet Cloudera seine Hadoop-Distribution ab sofort frei zum Download an. Das Apache-Projekt dient zur Verarbeitung großer Datenmengen auf verteilten Systemen und ist an Googles Map/Reduce-Engine angelehnt.

"Kilimanjaro" für Business-Intelligence-Funktionen. Microsoft arbeitet an einer Erweiterung für den SQL Server 2008. Dadurch soll das Datenbanksystem um verschiedene Business-Intelligence-Funktionen erweitert werden. Vor 2010 ist jedoch nicht mit Kilimanjaro, so der Codename der Software, zu rechnen.

OpenSolaris als Betriebssystem. Die OpenSolaris-Community hat eine Live-CD mit einem Hadoop-Cluster veröffentlicht. Vom Start bis zum voll einsatzbereiten Cluster sollen dabei nur etwa 15 Minuten vergehen. Zudem soll sich die Software mit verhältnismäßig geringen Ressourcen ausprobieren lassen.

HP, Intel und Yahoo bauen Testumgebung für Cloud-Computing auch in Karlsruhe. HP, Intel und Yahoo starten eine gemeinsame Open-Source-Testumgebung für Cloud-Computing, die mehrere Rechenzentren umfasst. Damit sollen finanzielle und logistische Barrieren bei der Forschung im Bereich Cloud-Computing abgebaut werden.

Unabhängiger Anbieter Datallegro nun im Paket mit Microsofts SQL Server 2008. Microsoft kauft Datallegro, einen Anbieter für Data Warehousing-Appliances. Die privat geführte Firma aus dem kalifornischen Aliso Viejo hat 100 Mitarbeiter und ist auf vorkonfigurierte Systeme aus Standardhardware und -software spezialisiert. Der bislang unabhängige Anbieter wird vom neuen Besitzer auf den "Microsoft SQL Server 2008" festgelegt.

Freie Datenintegrationssoftware in neuer Version. Talend hat auf dem LinuxTag in Berlin eine neue Version seiner Datenintegrationslösung Open Studio vorgestellt. Die Open-Source-Software erkennt in der neuen Version automatisch Änderungen an Datenstrukturen, um den Integrationsprozess anzupassen.

Neuer Crawler durchsucht das Netz für Yahoo. Yahoo hat seinen Crawler und die dahinterliegende Infrastruktur überarbeitet und schickt seinen Crawler Slurp nun in der Version 3.0 ins Netz. Im Vorfeld der Umstellung war es zu einigen ungewollten Unregelmäßigkeiten der Yahoo-Crawler gekommen.

Webmap umfasst 11 Billionen Verknüpfungen. Yahoo hat die bislang größte Hadoop-Installation in Betrieb genommen, auf der Yahoos Webmap liegt, die Basis von Yahoos Suche. Yahoos Hadoop-Installation umfasst mehr als 10.000 CPUs sowie 5 PByte Festplattenplatz.

Yahoo startet Programm zur Verbesserung von Open Source für Internet Computing. Yahoo legt ein Programm auf, um die Forschung und Entwicklung von Open-Source-System-Software für verteiltes Rechnen zu fördern. Dabei folgt Yahoo einem ähnlichen Plan von Google und IBM, stellt aber eine deutlich größere Hardware-Installation zur Verfügung.

IBM und Google wolle Internet-Scale-Computing fördern. Neue Methoden der Software-Entwicklung, mit denen sich die Herausforderungen künftiger Generationen von Internetapplikationen besser bewältigen lassen, wollen Google und IBM mit einer gemeinsamen Initiative fördern. Im Kern geht es darum, Studenten im Bereich paralleles Rechnen besser auszubilden, um so die Möglichkeiten verteilter Rechner-Ressourcen besser nutzen zu können.

Zusammenarbeit mit JasperSoft. Ingres hat seine Icebreaker-Appliance mit Business-Intelligence-Software von JasperSoft ausgestattet. Kunden können so ein Paket aus Linux, der Ingres-Datenbank und Open-Source-Software für Business Intelligence erhalten, für den sie einen Ansprechpartner haben.

JasperReports Professional und JasperStudio basieren auf dem Open-Source-Projekt. JasperSoft hat zur JavaOne drei kommerzielle Versionen seiner Berichtssoftware veröffentlicht. Sie basieren auf dem Open-Source-Projekt JasperReports und eignen sich zur automatisierten Datenaufbereitung, z.B. von Geschäftsberichten in Druckqualität und für das Web.

Lokalisierung der Business-Intelligence-Software über Community-Seite. JasperSoft arbeitet an Lokalisierungen seiner als Open Source verfügbaren Business-Intelligence-Software. Dabei soll nicht nur die reine Übersetzung im Vordergrund stehen, sondern die Programme sollen auch an lokale Gegebenheiten angepasst werden. Über eine Community-Seite können externe Entwickler an Lokalisierungen mitarbeiten.

Unternehmen entwickelt Software für den Unternehmenseinsatz. Das Unternehmen Pentaho hat in einer weiteren Finanzierungsrunde acht Millionen US-Dollar Risikokapital von dem Investmentunternehmen New Enterprise Associates (NEA) einsammeln können. Pentaho entwickelt eine als Open Source veröffentlichte Business-Intelligence-Lösung (BI) namens "Pentaho BI Suite".

Office PerformancePoint Server 2007 soll für Überblick im Unternehmen sorgen. Microsoft hat mit dem Office PerformancePoint Server 2007 eine Softwarelösung vorgestellt, die es Unternehmen erlauben soll, ihre Zahlen systematisch zu analysieren und ihr Geschäft so besser planen und gestalten zu können.

Softwarekonzern kauft seinen Partner ProClarity. Mit ProClarity übernimmt Microsoft ein auf Analyse- und Visualisierungstechnologien spezialisiertes Unternehmen. Die Software von ProClarity arbeitet mit Microsofts Business-Intelligence-Plattform (BI) zusammen, zu der unter anderem der SQL Server 2005, der Office Business Scorecard Manager 2005, Excel und der SharePoint Portal Server gehören.

Der nächste Schritt in Oracles Fusionsstrategie. Oracle hat seine Business-Intelligence-Middleware mit Siebel Business Analytics vereint und bietet das kombinierte Produkt nun als Oracle Business Intelligence Suite an. Ihre Stärken soll die Lösung vor allem in Kombination mit weiteren Oracle-Produkten ausspielen.

Open-Source-Anbieter erhält 5 Millionen US-Dollar. Pentaho, Anbieter einer Open-Source-Business-Intelligence-Lösung, hat in einer ersten Finanzierungsrunde 5 Millionen US-Dollar Venture-Kapital erhalten. Doch auch Fachwissen im Bereich Open Source soll Pentaho zur Verfügung gestellt werden.

Business Scorecard Manager 2005 für Microsofts Office-Paket angekündigt. Als Ergänzung für Microsofts Office-Paket hat Redmond die Software "Business Scorecard Manager 2005" angekündigt, um "Business Intelligence"-Funktionen in die Office-Software zu integieren. Auf diesem Wege lassen sich Geschäftsdaten wie Verkaufs- und Absatzzahlen mit den Sollvorgaben eines Unternehmens auf einfache Weise vergleichen, verspricht der Hersteller.

Vier neue Server im Angebot. Die neuen Dell-PowerEdge-Systeme 1800, 1850, 2800 und 2850 sind mit bis zu zwei Intel-Xeon-Prozessoren mit 64-Bit-EM64T-Architektur ausgestattet. Anwender können damit sowohl 32-Bit-Anwendungen betreiben als auch dank der EM64T-Architektur 64-Bit-Anwendungen einsetzen.