Big Data

Die Bayerische Polizei soll ihre Datenbanken automatisiert auswerten können. Bund und Länder könnten folgen. Datenschützer sind entsetzt.

Mit der Mach.2 Exos 2X14 führt Seagate eine Festplatte mit zwei Aktoren für doppelte Geschwindigkeit ein. Der Nachteil ist deren Kapazität.

Die logische Programmiersprache Logica von Google ist Open Source und für die Nutzung mit SQL und Bigquery gedacht.

Nach dem Lizenzwechsel bei Elasticsearch hilft sich die Open-Source-Community nun selbst und startet wie erwartet einen eigenen Fork.

Sonst noch was? Was am 30. März 2021 neben den großen Meldungen sonst noch passiert ist, in aller Kürze.

Mit Googles Cloud-Datenbank Bigtable sollen sich schnell riesige Datenmengen verarbeiten lassen. Spotify setzt aber auf etwas Eigenes.

Nach dem Lizenzwechsel soll Elasticsearch als Community-Fork weitergeführt werden. Die Initiatoren kontern die Kritik an AWS durch Elastic.

Eine Studie erkennt mit maschinellem Lernen die politische Einstellung am Gesicht - und warnt vor dem Einsatz von Gesichtserkennung.
Von Moritz Tremmel

Eine Hackergruppe löscht Hunderte ungeschützte Datenbanken und hinterlässt nur Zufallszahlen und ein "meow".

Ob autonomes Fahren, Aktienhandel oder Onlineshopping: Soll das Ergebnis gut sein, müssen Informationen quasi in Echtzeit ausgewertet werden. Eine gute Lösung dafür: CEP.
Von Boris Mayer

Das Projekt soll künftig von einer Gruppe aus der Community geführt werden. Transparent ist das Verfahren des Redis-Teams aber nicht.

Mit dem Open-Source-Projekt PartiQL hat Amazon eine Abfragesprache vorgestellt, die eine Vielzahl verschiedener Datenbanken einheitlich ansprechen können soll. Das Unternehmen hat die Technik nach eigenen Angaben zunächst für eigene Probleme entwickelt.

Die Anbieter bedeutender Open-Source-Datenbanken wie MongoDB, Redis und Elastic haben in der Vergangenheit die großen Cloud-Anbieter harsch kritisiert und auch ihre Lizenzen geändert. Google kooperiert nun offiziell mit vielen dieser Firmen.

GDC 2019 Die systematische Sammlung und Analyse von Daten macht Spiele erfolgreich. Bekanntestes Beispiel ist Fortnite, für das eine Software von Amazon die Vorlieben und Ärgernisse der Kundschaft auswertet.

Wozu sammelt ein völlig unbekanntes Unternehmen Hunderte Millionen E-Mail-Adressen und weitere Nutzerdaten? Dahinter steckt eine Dienstleistung, die für Spammer nützlich ist.

Mit den Amazon Web Services bereichere sich das Unternehmen an Open-Source-Software, ohne viel zurückzugeben, sagen einige Kritiker. Das Unternehmen sieht sich selbst eher als "stillen Beitragenden" und bemüht sich um größeres Engagement.

In einem Interview zu einer neuen Finanzierungsrunde verteidigt der Redis-Chef das neue Lizenzmodell der gleichnamigen Datenbanksoftware. Das aktuelle Open-Source-Modell müsse "repariert" werden. Dagegen gibt es aber auch Widerspruch.

Mit einem "Daten-für-alle-Gesetz" will SPD-Chefin Andrea Nahles Datenmonopole der großen IT-Konzerne verhindern. Der Datenschutz soll dabei nicht zu kurz kommen.

Wer sich auch nur oberflächlich mit Big-Data und Echtzeit-Analyse beschäftigt, stößt schnell auf Begriffe und Lösungen, die sich nicht sofort erschließen. Warum brauche ich eine Nachrichten-Queue und was unterscheidet Apache Hadoop von Kafka? Welche Rolle spielt das in einer Kappa-Architektur?
Von George Anadiotis

Die im Cloud-Einsatz beliebte Datenbank MongoDB hat seit einigen Monaten eine neue Lizenz. Der Hersteller bezeichnet diese als Open Source. Das Team der wichtigen Linux-Distribution Fedora widerspricht nun aber und verbietet die Aufnahme in die eigenen Paketquellen. Ähnliches gilt für RHEL und Debian.

Der chinesische Internetkonzern Alibaba übernimmt seinen Partner Data Artisans. Das Big-Data-Startup arbeitet an dem Open-Source-Framework Apache Flink.

Der Lizenz- und Compliance-Experte Bradley M. Kuhn von der Software Freedom Conservancy zeigt sich wenig begeistert vom Lizenzwechsel bei MongoDB. Die OSI solle die Lizenz ablehnen und MongoDB klar als proprietär bezeichnen.

MongoDB kann nach dem erfolgreichen Börsengang einkaufen gehen. MLab wird nun Teil des Unternehmens.

Auch E-Sport ist Big Data: Um Zuschauer und Kommentatoren bei der ESL One 2018 in Hamburg besser zu informieren, arbeitet der Veranstalter mit SAP zusammen. Konkret geht es um die Heldenauswahl in Dota 2.

"Master" und "Slave": Diese Begriffe sind für einige Entwickler unangebracht, da sie mit Sklaverei verbunden sind. Auf Github diskutiert die Python-Community deshalb Alternativen. Andere Nutzer finden den Aufwand einfach zu groß.

Ausgerechnet die Datenmanagementfirma Veeam lässt ihre Kundendatenbank öffentlich zugänglich im Internet liegen. Die Kundendaten seien keine sensiblen Daten.

Die dokumentenorientierte Datenbank MongoDB 4.0 bringt Support für Transaktionen nach dem ACID-Prinzip mit. Zusatzdienste decken zudem Anforderungen an die Datenschutz-Grundverordnung ab. Die Entwicklungsumgebung MongoDB Stitch soll die Entwicklung von mobilen Apps und Webanwendungen ermöglichen.

Build 2018 Ursprünglich war die Bewegungs- und Sprachsteuerung Kinect für Spieler gedacht, nun soll sie in neuer Form unter dem Namen Project Kinect for Azure bei KI-Anwendungen helfen.

Die verteilte Datenbank FoundationDB steht unter der Apache-2.0-Lizenz. Besitzer Apple will eine Community um das Projekt aufbauen, die Erweiterungen entwickeln soll.

Daten unverschlüsselt im Netz zu speichern, ist bekannterweise nicht sinnvoll. Ein britischer Onlinehandel für Drohnen hat trotzdem Kundendaten, Kreditkarteninformationen und Transaktionen in Klartext abgelegt. Die britische Regierung ist betroffen und verlangt eine Löschung.

Über eine bezahlte Studie haben Nutzer eine App installiert, welche die Daten ihrer Facebook-Profile und die der Facebook-Kontakte sammelte. Ein Analysetool konnte dann ihre Vorlieben und Ängste vorhersehen. Trump konnte das wohl zu seinem Vorteil nutzen. Ein Gründer von Cambridge Analytica verriet Details.

Durch intelligente Vergleiche mit dem Code aus älteren Spielen können die Programmierer bei Ubisoft (Far Cry 5) sechs von zehn Fehlern schon beim Erstellen von Code entdecken - und das selbstlernende System wird immer besser.

IBMs KI-System Watson bekommt ein Pixelgesicht, einen Körper und einen Astronauten zur Seite. Auf der ISS soll der Roboter getestet werden. Zunächst soll er als automatisierter Protokollführer von Experimenten und fliegende Kamera eingesetzt werden.

Für seine Cloud- und Enterprise-Dienste verstärkt Microsoft weiter sein Open-Source-Engagement, wie das Unternehmen auf der Entwicklerkonferenz Connect bekannt gab. Das betrifft vor allem Datenbanktechnik, aber auch eine Kooperation mit Github.

Auf fünf Höheneinheiten bringt der Superdome Flex viel Hardware unter - etwa vier Prozessoren, vier Netzteile, vier Netzwerkkarten und 48 RAM-Bänke. Das Vorbild ist HPEs The Machine.

IBMs neue neue Cloud Private soll besonders für Entwickler interessant sein, die ihre Programme mit Public-Cloud-Diensten verknüpfen, ihre Daten aber privat verwalten wollen. Die Plattform unterstützt gängige Open-Source-Software wie Kubernetes und Openstack.

Seit 2016 gehört Yahoo zur Verizon-Gruppe und darin zu Oath, dem Verizon Digital Network. Oath stellt nun Yahoos in Java verfasste Big-Data-Engine Vespa unter eine Open-Source-Lizenz.

Das MongoDB-Unternehmen hat sich wie zuvor vermutet bei der US-Börsenaufsicht SEC für den Aktienverkauf an der Nasdaq registriert. Irritierenderweise werden Investoren dabei unter anderem vor der Community-Version der Datenbank gewarnt.

Supercomputer Watson sollte der klügste Computer der Welt werden und dem Unternehmen unter Chefin Virginia Rometty Milliarden bringen. Doch der Rechner enttäuscht.
Von Matthias Kamp, Michael Kroker und Sven Prange

Für Rechenzentren und die Cloud: Western Digital bringt Festplatten für Enterprise-Kunden, die eine hohe Kapazität haben und trotzdem zuverlässig sein sollen. Auf dem Papier können sie mit Festplatten von HGST mithalten - der eigenen Tochterfirma.

Google weitet seine Cloud Platform auf Deutschland, Österreich und die Schweiz aus. Die neue Zone soll für einen besseren Ping und mehr Leistung sorgen. Doch nicht nur in Deutschland können sich Kunden über eine neue Zone freuen.

Einem Medienbericht zufolge hat das MongoDB-Unternehmen damit begonnen, an die Börse zu gehen. Entsprechende Formulare seien bei der Börsenaufsicht eingereicht worden. Die Geschäfte umfassen Dienstleistungen zur gleichnamigen Datenbank und Cloudhosting.

Um terroristische und andere rechtswidrige Inhalte zu erkennen, setzt Youtube neuerdings maschinelles Lernen ein. Erste Erfolge sprechen für das System. Trotzdem sind Menschen für die Filterung solcher Videos noch unverzichtbar.

"Na endlich!" heißt es, wenn etwas klappt und wenn nicht, dann geht es dem Systemadministrator an den Kragen. Ich habe den Job total unterschätzt - und musste aufgeben, wo andere zu IT-Superhelden werden.
Ein Erfahrungsbericht von Oliver Nickel

Was IBMs KI Watson ermöglicht, ist aus Sicht der Investmentbank Jefferies nicht die Zukunft. Die liege beim maschinellen Lernen und Deep Learning. In dieses Feld investiert die Konkurrenz - darunter Google, Amazon, Apple und Facebook.

Komplexe Aufgaben fallen bisher an menschliche IT-Administratoren. IBM will das ändern: Die IBM Services Platform nutzt die eigene künstliche Intelligenz Watson, um automatisierte Prozesse zu optimieren. Das spart Geld - und Arbeitsplätze.

Mit dem Open-Source-Werkzeug Bullet von Yahoo sollen Daten schon untersucht werden können, während diese in Echtzeit gestreamt werden. Für eine Big-Data-Analyse müssen die Daten damit nicht mehr aggregiert werden.