Der wahre Grund, warum die iPhone-Chips immer schneller werden

Natürlich stimmt es, dass heutige Smartphones ziemlich schnell rechnen können. Apple hat seit einigen Jahren die leistungsstärksten Chips in petto und marschiert ein oder zwei Generationen voraus. In den neuen iPhones schlummert der Chip A12 Bionic - und natürlich ist er schneller als alles bisher dagewesene in der mobilen Welt.

Aber was macht man mit der schieren Rechenpower eines solchen Chips? 3D-Spiele können diese Chips natürlich ausfahren. Dafür alleine entwickelt Apple die ständig schneller werdenden SoCs aber nicht. Vielmehr zeigt Apple mit jedem neuen Event, wie Hochleistungs-Chips in mobilen Geräten die Zukunft verändern werden. Dabei spielt die Augmented-Reality-Plattform ARKit eine zentrale Rolle. 

Schaut Euch beide ARKit-Demos im Video an!

AR revolutioniert Sporttraining

Ein Beispiel dafür war die Demo der App Homecourt. Der ehemalige NBA-Spieler Steve Nash zeigte, wie ein iPhone dabei hilft, die Wurftechnik im Basketball zu perfektionieren. Die App nennt sich Homecourt und läuft ohne weitere externe Sensoren auf dem iPhone.

Apple zeigte sie in Aktion. Auf einem Basketballplatz trainiert eine Spielerin ihre Würfe. Das iPhone war - offenbar mit einem Stativ - so aufgestellt, dass die Kamera den Bereich um die 3-Punkte-Linie einsehen kann. Dann geht das Training los. Die Spielerin wirft den Ball immer wieder in den Korb und die App zählt mit, wie viele Würfe in den Korb gehen und wie viele nicht. Außerdem erkennt sie, an welchen Stellen auf dem Platz der Wurf geschah.

Nett, aber nicht mehr, was? Aber es geht weiter. Homecourt erkennt mehrere Details eines Wurfes, den Winkel der Füße oder den Abwurfwinkel. Geschwindigkeit, Wurfhöhe und die Lösezeit. Alles Parameter, die für einen perfekten Wurf ausschlaggebend sind. Zwar gab es keine detaillierten Ausführungen, wie Homecourt all diese Parameter erkennt, deutlich wurde aber, dass das iPhone das Bild analysiert, anhand der Bewegungen eine Skelettsimulation betreibt und daraus Rückschlüsse zieht.

Should I start playing basketball now? 🏀 pic.twitter.com/TmeN5n9fVw

— Justine Ezarik (@ijustine) September 12, 2018

Homecourt ist ein Beispiel dafür, wie Smartphones zunehmend spezialisierte Sensoren überflüssig machen. Bild- und Objekterkennung kann inzwischen auf dem Smartphone laufen.

Leerer Tisch und trotzdem Spaß

AR ist natürlich auch für Spiele ein interessantes Thema. Damit meine ich nicht so sehr Pseudo-AR wie Pokémon Go. Ein leerer Tisch musste herhalten, auf dem mehrere Spieler - für Außenstehende unsichtbar - ein Feuerwerk entfachten. Der Name des Spiels: Galaga AR, ein recht einfacher Arcade-Shooter. 

Krass: Mehrere Spieler bewegen sich um einen Tisch und schießen in der imaginären Welt Gegner weg. Das Spielprinzip ist nicht revolutionär, die Technik hingegen schon: Mehrere Spieler sehen eine perfekt synchronisierte Welt, die fest auf dem Tisch verankert ist. Dies ist erst neuesten Entwicklungen wie ARKit 2 möglich. Google wird mit ARCore sicher bald nachziehen.

Noch brauchen wir ein Smartphone oder iPad dafür, sicher ist das aber nicht das Ende der Fahnenstange. Praktischere AR-Brillen befinden sich schon in den Laboren der großen Hersteller in der Mache - die einzige Frage ist, wer sich zuerst auf die Bühne wagt. Apple-Experte Rene Ritchie sieht in Multiplayer-AR ebenfalls großes Potenzial:

(Shared AR experiences are really next-level fun. It takes phones and tablets now, but clearly this will simply become a real, almost transparent augmented reality in the near future.)

— Rene Ritchie (@reneritchie) September 12, 2018

Für Außenstehende bleiben solche Spiele naturgemäß unsichtbar:

Und noch eine App, die die Vorteile des neuen Prozessors nutzt - dieses Mal die #AugmentedReality-Funktionen. Sieht in echt noch bescheuerter aus als im Stream, aber es macht Spaß. Hatte was ähnliches im Juni auf der #WWDC18 ausprobiert. pic.twitter.com/mJCL2gIij1

— Robert Berg (@cb_rberg) September 12, 2018

AR braucht mehr Rechenpower

Vor allem aus der Homecourt-Demo nehmen wir viel mit: AR-Filterchen bei Snapchat oder Facebook sind schnell berechnet, da braucht es keine Hochleistungs-Smartphones. In den kommenden Jahren werden wir sehen, wie die gesamte Branche die Jagd nach höchster Performance weitertreiben wird. Mächtige AR-Anwendungen benötigen leistungsstarke Grafikchips, vor allem aber NPUs, die Machine-Learning-Anwendungen beschleunigen können.

Mit 5G werden dann auch AR-Brillen realistisch. Diese verwenden dann die Rechenleistung der Cloud, um Apps wie Homecourt zu realisieren. Google (mit AR-Stickers) und Apple (mit Animojis) treiben das AR-Spiel schon heute mit den unterhaltsamen Stickern voran, um die Nutzerbasis an eine digital erweiterte Welt zu gewöhnen. Begrifflich sprechen viele von Mixed Reality (XR). Wie zufällig wurde eigentlich der Name iPhone XR gewählt?

Das Smartphone hat Mobilität mit sich gebracht. Jetzt erobert die Technologie nicht nur unsere Hosentaschen, sondern übernimmt unsere Realität, sei es mit AR oder VR. Was wir heute mit den manchmal etwas niedlichen AR-Demos sehen, ist ein Fingerzeig in eine Zukunft, in der uns digitale Objekte umgeben und wir sie kaum mehr von realen unterscheiden können. Nennen wir es Spatial Computing oder Ambient Computing: Technik wird unsere Realität umkrempeln. Und das nicht erst in 20 Jahren.

Wie steht Ihr zu AR? Bald schon fester Bestandteil im Alltag? Schreibt Eure Meinung in die Kommentare!