• IT-Karriere:
  • Services:

Darpa: Memex soll die Suchmaschine für das Deep Web werden

Die US-Behörde Darpa hat die Komponenten ihrer Suchmaschine Memex veröffentlicht. Mit ihr soll auch das Deep Web und vor allem das Tor-Netzwerk durchsucht werden können. Hilfe bekam die Darpa von den Tor-Entwicklern.

Artikel veröffentlicht am ,
Die Suchmaschine Memex der Darpa soll auch Informationen aus dem Deep Web sammeln können.
Die Suchmaschine Memex der Darpa soll auch Informationen aus dem Deep Web sammeln können. (Bild: Uncharted Software)

Strafverfolgungsbehörden wollen bislang unsichtbare Inhalte im Internet durchsuchen können, um Kriminelle dingfest zu machen. Traditionelle Suchmaschinen reichen hierfür nicht aus und spezielle Suchmaschinen etwa für das Tor-Netzwerk schon gar nicht. Abhilfe soll also die von der US-Behörde Defense Advanced Research Projects Agency (Darpa) vorgestellte Suchmaschine Memex schaffen. Jetzt hat die Darpa die dazu benötigten Werkzeuge veröffentlicht.

Inhalt:
  1. Darpa: Memex soll die Suchmaschine für das Deep Web werden
  2. Suchmaschinen für das Tor-Netzwerk
  3. Auftritt: Memex

Memex soll aber nicht nur Webseiten im Tor-Netzwerk sammeln und indizieren, sondern auch Inhalte im sogenannten Deep Web entdecken. Also jene Seiten, die weder von Google noch von Bing oder Yahoo indiziert werden. Diese Suchmaschinen zeigten nur fünf Prozent des tatsächlichen Inhalts des Internets an, sagte der Hauptentwickler des Memex-Projekts, Chris White, zu CBS.

Werkzeug für Strafverfolgungsbehörden

Memex, oder zumindest ein Teil der Implementierung, werde bereits erfolgreich von Strafverfolgungsbehörden in den USA angewendet, um gegen Kinderpornografie, organisierten Menschen- und Drogenhandel vorzugehen, so der CBS-Bericht. Die gesammelten Informationen, darunter auch von Werbeeinblendungen, werden zusammen mit Standortdaten durch Memex visualisiert und sollen es den Fahndern erlauben, Bewegungsprofile möglicher Täter zu erstellen. Die Fahnder können die Suchergebnisse auch selbst filtern.

Die Darpa hat sich für ihr Projekt Hilfe von einer ganzen Reihe bekannter Einrichtungen geholt, darunter renommierte Universitäten oder Forschungsinstitute. Auch von den Entwicklern beim Tor-Projekt bekommt die Darpa Hilfe, wie der Mitgründer des Projekts Roger Dingledine bestätigte. Im Gegenzug finanziert die Behörde in den nächsten Jahren Verbesserungen im Tor-Netzwerk, die den Datenverkehr beschleunigen und die Sicherheit der Nutzer erhöhen sollen.

Hilfe von Tor-Entwicklern

Stellenmarkt
  1. Bechtle Onsite Services GmbH, München
  2. allsafe GmbH & Co.KG, Engen

Das Tor-Projekt wolle der Darpa und somit den Fahndern ein besseres Verständnis des Netzwerks vermitteln, aber keinesfalls die Anonymität der Benutzer gefährden, schreibt Dingledine. Die Adressen der versteckten Dienste (Hidden Services) im Tor-Netzwerk seien dort immerhin öffentlich und müssten demnach auch indiziert werden dürfen. Dass dort auch Kriminelle ihre Dienste anbieten und Tor einen schlechten Ruf bescheren, ärgert ihn maßlos: "Fuck them, they should get off our network, that's not what Tor is for and they're hurting all of us."

Nach Schätzungen des Forschers Gareth Owen sind durchschnittlich 45.000 Hidden Services pro Tag über Tor erreichbar. Dabei handelt es sich nicht nur um Webseiten, sondern auch auch um andere Dienste, etwa IRC-Server oder Command-and-Control-Server für Botnets. Owens Studie zufolge lassen sich aber weniger als 10.000 Dienste über einen längeren Zeitraum abrufen, etwa die Suchmaschine Duckduckgo oder Facebook, das seit Oktober 2014 ebenfalls eine Onion-Adresse hat. Viele Dienste waren nur über einen kurzen Zeitraum erreichbar - eine Herausforderung für jede Suchmaschine. Die im Vergleich zum offenen Web deutlich geringere Anzahl an zu indizierenden Webseiten hingegen dürfte Datenbanken auch auf Servern mit geringer Kapazität nicht überfordern.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed
Suchmaschinen für das Tor-Netzwerk 
  1. 1
  2. 2
  3. 3
  4.  


Anzeige
Hardware-Angebote
  1. 555,55€ (zzgl. Versandkosten)
  2. (reduzierte Überstände, Restposten & Co.)

holysmoke 24. Apr 2015

Freiheit kennt keine Kompromisse. Entweder man ist frei, oder eben nicht. Kriminalität...

Oxycodon 23. Apr 2015

@mag +1000 Finde deinen Beitrag sehr gut geschrieben, besser hätte man es nicht...

zufälliger_Benu... 23. Apr 2015

Das "deep web" ist eigentlich einfach alles das über eine "normale" Suchmaschine nicht...


Folgen Sie uns
       


Tolino Vision 5 HD und Epos 2 im Hands On

Tolino zeigt mit Vision 5 HD und Epos 2 zwei neue Oberklasse-E-Book-Reader. Der Epos 2 kann durch ein besonders dünnes Display begeistern.

Tolino Vision 5 HD und Epos 2 im Hands On Video aufrufen
Mitsubishi: Satelliten setzen das Auto in die Spur
Mitsubishi
Satelliten setzen das Auto in die Spur

Mitsubishi Electric arbeitet am autonomen Fahren. Dafür betreibt der japanische Mischkonzern einigen Aufwand: Er baut einen eigenen Kartendienst sowie eine eigene Satellitenkonstellation auf.
Ein Bericht von Dirk Kunde


    Echo Dot mit Uhr und Nest Mini im Test: Amazon hängt Google ab
    Echo Dot mit Uhr und Nest Mini im Test
    Amazon hängt Google ab

    Amazon und Google haben ihre kompakten smarten Lautsprecher überarbeitet. Wir haben den Nest Mini mit dem neuen Echo Dot mit Uhr verglichen. Google hat es sichtlich schwer, konkurrenzfähig zu Amazon zu bleiben.
    Ein Test von Ingo Pakalski

    1. Digitale Assistenten Amazon verkauft dreimal mehr smarte Lautsprecher als Google
    2. Googles Hardware-Chef Osterloh weist Besuch auf smarte Lautsprecher hin
    3. Telekom Smart Speaker im Test Der smarte Lautsprecher, der mit zwei Zungen spricht

    Elektroschrott: Kauft keine kleinen Konsolen!
    Elektroschrott
    Kauft keine kleinen Konsolen!

    Ich bin ein Fan von Retro. Und ein Fan von Games. Und ich habe den kleinen Plastikschachteln mit ihrer schlechten Umweltbilanz wirklich eine Chance gegeben. Aber es hilft alles nichts.
    Ein IMHO von Martin Wolf

    1. IMHO Porsche prescht beim Preis übers Ziel hinaus
    2. Gaming Konsolenkrieg statt Spielestreaming

      •  /