Project Trillium: ARM bringt Machine Learning in Smartphones

Nachdem Apple, Huawei und Img Tech bereits Hardware oder IP für künstliche Intelligenz in Smartphones haben, zieht ARM nach: Project Trillium umfasst Inferencing und Objekterkennung. Die Integration erfolgt eng neben den CPU-Kernen.

Artikel veröffentlicht am ,
Project Trillium
Project Trillium (Bild: ARM)

ARM hat das Project Trillium vorgestellt, das Hardware und Software für Machine Learning in Smartphones umfasst: Enthalten sind zwei IPs, die Hersteller in ihre Systems-on-a-Chip integrieren können, eine für Machine Learning und eine für Object Detection, sowie passend dazu das quelloffene Neural Net SDK für Linux. Für ARM ist das ein wichtiger Schritt, denn Imagination Techologies hat mit der PowerVR 2NX schon eine IP für Machine Learning in Smartphones und Apple im A11 Bionic sowie Huawei im Kirin 970 bereits implementierte Hardware für künstliche Intelligenz.

  • Project Trillium (Bild: ARM)
Project Trillium (Bild: ARM)

Der ML-Prozessor (Machine Learning) ist für Inferencing gedacht, also das Anwenden eines bereits trainierten Modells. ARM spricht von einer Rechenleistung von 4,6 Teraops mit INT8-Genauigkeit bei 1,5 Watt, wenn die IP mit 7-nm-Technik verwendet wird. Huawei wiederum nennt 1,92 Teraflops mit FP16-Präzision für die eigene NPU, was eines klarmacht: Theoretische Werte sind bei künstlicher Intelligenz genauso wenig direkt vergleichbar wie bei Grafikchips oder anderen Prozessoren. Schlussendlich zählen die Auslastung der Rechenwerke und die Optimierung durch die verwendete Software.

Beim OD-Prozessor (Object Detection) handelt es sich um IP zur Objekterfassung in Videos. Das würde zwar auch per neuralem Netz klappen, dedizierte Hardware erledigt das aber effizienter und das zählt bei einem Smartphone-SoC. Die Objekterfassung soll bei 1080p mit 60 Bildern pro Sekunde erfolgen, das zu erfassende Subjekt muss mindestens 60 x 50 Pixel messen. Die Technik für den OD-Prozessor stammt ursprünglich von Apical, denn ARM hatte den britischen Hersteller im Frühling 2016 übernommen.

Laut ARM sind beide neuen IPs als eigene Blöcke in einem SoC umsetzbar, alternativ kann eine engere Integration direkt in einen Dynamiq-Cluster neben den CPU-Kernen erfolgen. Wir erwarten erste Designs nicht vor 2019, entsprechende Smartphones erscheinen eventuell 2020.

Bitte aktivieren Sie Javascript.
Oder nutzen Sie das Golem-pur-Angebot
und lesen Golem.de
  • ohne Werbung
  • mit ausgeschaltetem Javascript
  • mit RSS-Volltext-Feed


Aktuell auf der Startseite von Golem.de
Galaxy S23 im Hands-on
Viel Leistung und viel Kamera

Samsungs neue Galaxy-S23-Modelle sind sehr leistungsstark und hochwertig. Die 200-Megapixel-Kamera bekommt nur das Ultra-Modell.
Ein Hands-on von Tobias Költzsch

Galaxy S23 im Hands-on: Viel Leistung und viel Kamera
Artikel
  1. Energiespargeräte und Diskokugeln: Bundesnetzagentur zieht 15 Millionen Geräte aus dem Verkehr
    Energiespargeräte und Diskokugeln
    Bundesnetzagentur zieht 15 Millionen Geräte aus dem Verkehr

    Die Bundesnetzagentur hat im vergangenen Jahr zahlreiche Produkte verboten. Darunter sind Energiespargeräte, Fernbedienungen und Diskokugeln.

  2. Western Australia: Eine radioaktive Kapsel - irgendwo im australischen Outback
    Western Australia
    Eine radioaktive Kapsel - irgendwo im australischen Outback

    Wie eine radioaktive Kapsel in Australien verlorengehen konnte, ob sie gefährlich ist, warum sie so schwierig zu finden war und wofür solche Kapseln gut sind.
    Ein Bericht von Werner Pluta

  3. Galaxy Book 3: Samsung stellt die Galaxy-Book-3-Serie vor
    Galaxy Book 3
    Samsung stellt die Galaxy-Book-3-Serie vor

    Neben der Hardware legt Samsung Wert auf die mitgelieferte Software. Damit sollen sich Notebook und Mobilgeräte leichter gemeinsam nutzen lassen.

Du willst dich mit Golem.de beruflich verändern oder weiterbilden?
Zum Stellenmarkt
Zur Akademie
Zum Coaching
  • Schnäppchen, Rabatte und Top-Angebote
    Die besten Deals des Tages
    Daily Deals • Bis 77% Rabatt auf Fernseher bei Otto • Roccat Kone Pro -56% • Xbox Series S + Dead Space 299,99€ • PCGH Cyber Week • MindStar: ASRock RX 7900 XT 949€ • AMD CPU kaufen, SW Jedi Survivor gratis dazu • Philips LED TV 65" 120 Hz Ambilight 999€ • KF DDR4-3600 32GB 91,89€ [Werbung]
    •  /