Die Welt der Virtual und Augmented Reality entwickelt sich rasant weiter. Eine App, die derzeit für Aufmerksamkeit sorgt und einen frühen Blick auf das Potenzial von Künstlicher Intelligenz in der Mixed Reality gibt, ist Decart XR. Verfügbar für die Meta Quest 3, ermöglicht diese kostenlose Anwendung ein faszinierendes "Reskinning" eurer realen Umgebung mittels generativer KI.
Was ist Decart XR?
Decart XR ist eine App, die ihr auf eurer Quest 3 sideloaden könnt. Der Client selbst ist Open Source, was bedeutet, dass der Code auf GitHub öffentlich zugänglich ist und jeder die Entwicklung nachvollziehen oder sogar daran teilhaben kann. Alternativ lässt sich die neueste kompilierte Version bequem über SideQuest herunterladen.
Wie funktioniert es?
Die Anwendung macht sich den Zugriff auf die Passthrough-Kamera des Horizon OS der Quest 3 zunutze. Wenn ihr die entsprechenden Berechtigungen erteilt, werden Bilder von den nach vorne gerichteten Farbkameras eures Headsets an die Server-seitigen KI-Stiltransfermodelle von Decart gesendet. Die resultierende, KI-generierte Ausgabe wird dann in einem rechteckigen Segment eurer Sicht überlagert, wodurch eure reale Umgebung eine neue Optik erhält.
Verfügbare Modi
Decart XR bietet zwei Hauptmodi, um eure Sicht zu transformieren:
- Warp the World: Dies ist der zentrale Modus, der Decarts "Mirage"-Modell zur Welttransformation nutzt. Ihr könnt eure Umgebung basierend auf 61 vordefinierten Prompts neu gestalten. Stellt euch vor, euer Wohnzimmer erscheint plötzlich wie ein Dschungel oder eine futuristische Stadt.
- Swap Your Friend: Dieser Modus verwendet Decarts "Lucy"-Modell, um Personen, die ihr anseht, ein neues Aussehen zu verleihen. Ähnlich wie fortgeschrittene Filter in Apps wie Snapchat, stehen hier 15 vordefinierte Prompts zur Verfügung.
Ein weiteres Feature ist die Möglichkeit, eigene Prompts per Spracheingabe zu verwenden, um die Transformationen noch individueller zu gestalten.
Aktuelle Erfahrungen und Limitationen
Bei Tests von Decart XR auf einer Quest 3 wurde festgestellt, dass die Anwendung aktuell noch mit einigen Herausforderungen zu kämpfen hat. Eine merkliche Latenz von etwa einer Sekunde zwischen Kopfbewegung und der Anpassung der Ansicht kann auftreten. Ebenso kann es zu Bildinkonsistenzen kommen, die sich in Form von Pulsieren und Verziehen äußern – Effekte, die man von frühen KI-Videomodellen kennt.
Ein weiterer wichtiger Punkt ist, dass Decart XR aktuell nur in 2D funktioniert. Dies führt dazu, dass die Transformation nicht wirklich das Gefühl vermittelt, die reale Umgebung würde sich verändern, sondern eher, als würde man auf ein großes Tablet vor sich schauen.
Ein Blick in die Zukunft
Trotz dieser anfänglichen Einschränkungen bietet Decart XR einen faszinierenden frühen Einblick in das grundlegende Konzept des KI-gestützten "Reskinnings" eurer Sicht. Die Vision dahinter ist klar: Eines Tages, wenn solche Transformationen mit deutlich geringerer Latenz, einem breiteren Sichtfeld und vor allem in 3D möglich sind, könnte dies eine zentrale Anwendung für XR-Headsets werden.
Stellt euch vor: Anstatt zwischen einer reinen VR-Umgebung oder dem einfachen Passthrough eures Zuhauses zu wählen, hättet ihr eine dritte Option – euer Zuhause, umgestaltet, um wie eine Szene aus eurem Lieblingsfilm, eurer Lieblings-TV-Show oder eurem Lieblingsspiel auszusehen. Diese Technologie, die unsere reale Umgebung dynamisch und immersiv anpassen kann, könnte in nur wenigen Jahren Realität werden.
Fazit
Decart XR ist mehr als nur eine Spielerei; es ist ein experimenteller Vorreiter, der zeigt, welche transformativen Möglichkeiten generative KI für die Mixed Reality bereithält. Es markiert einen wichtigen Schritt auf dem Weg zu einer Zukunft, in der die Grenzen zwischen der digitalen und physischen Welt noch stärker verschwimmen.
Was haltet ihr von der Idee, eure Umgebung per KI umzugestalten? Lasst uns eure Gedanken in den Kommentaren wissen!