Blog

Copy & Paste die reale Welt mit dieser neuen AR-App

Augmented Reality und Artificial Intelligence haben in den letzten Jahren unglaubliche Fortschritte gemacht. Jetzt gibt es einen neuen, spannenden Anwendungsfall für AR. Cyril Diagne, Entwickler bei Google Arts und Culture, demonstrierte in einem Twitter-Video ein neues Augmented Reality Tool Cut & Paste, mit der Fähigkeit, reale Objekte zu kopieren und in die digitale Welt einzufügen.

Das Video zeigt, wie Diagne verschiedene reale Objekte aufnimmt und sie dann in ein Photoshop-Projekt hinzufügt. In seinem Thread erklärt er, dass eine erste Komponente mithilfe von maschinellem Lernen das Objekt im Vordergrund vom Hintergrund trennt. Eine zweite Komponente erkannt dann, wohin das Telefon auf dem PC-Bildschirm zeigt. Der gesamte Vorgang dauert etwa 6,5 Sekunden: 2,5 Sekunden zum Kopieren des Objekts und vier Sekunden zum Einfügen. Derzeit benötigt das Tool Photoshop als Ausgabe. Diagne merkt jedoch an, dass es zukünftig möglicherweise auch andere Programme unterstützt.

Vielversprechende Anwendungsfälle

AR Cut and Paste ist auf jeden Fall beeindruckend, da das Tool den AR-Prozess, wie wir ihn bis dato kennen und verwenden, umkehrt. Bisher nutzen andere Anwendungen AR, um digitale Bilder in die reale Welt zu projizieren. Gerade im Bereich Shopping und Werbung ist diese Technologie bereits häufig im Einsatz. Um uns beispielsweise zu zeigen, wie Kleidung, Make-up, Möbel und andere Objekte an uns oder in unserer Umgebung aussehen würden. AR Cut and Paste dreht den Prozess um, indem das Tool reale Objekte in die digitale Welt bringt.

Mit Blick auf die Zukunft könnte diese Technologie perfekt sein, um schnell Visuals aus der realen Welt zu erfassen und in digitale Dokumente einzufügen. Eine nützliche Funktion für verschiedenste Anwendungen, wie Präsentationen, Designs oder auch Bildbearbeitung. Statt ein Foto aufzunehmen, dies zu bearbeiten und dann das freigestellte Objekt an der gewünschten Stelle einzufügen, einfach die Smartphone-Kamera auf das Objekt halten und es auf den PC kopieren. Was den Vorgang erheblich beschleunigt und vereinfacht.

Diagne weist darauf hin, dass das Tool derzeit ein Forschungsprototyp ist und kein kommerzielles Anwender-Tool. Reaktionen auf das Video zeigen jedoch, dass anscheinend auch einige andere Unternehmen bereits an ähnlicher Software arbeiten. Diagne selbst hat seinen Code auf GitHub veröffentlicht, sodass jeder ihn überprüfen und zur Verbesserung des Tools beitragen kann. Wir können also gespannt sein, wann diese Technologie den nächsten großen Schritt machen wird.