PiEEG XR: Neue Wege für VR-Avatar-Ausdruck auf der Quest 3
Die VR-Welt entwickelt sich ständig weiter, und mit ihr die Möglichkeiten, wie wir in digitalen Räumen interagieren und uns ausdrücken können. Ein vielversprechendes neues Zubehör namens PiEEG XR könnte die Art und Weise, wie wir unsere VR-Avatare steuern, grundlegend verändern, insbesondere für Nutzer der Meta Quest 3.
Was ist PiEEG XR?
PiEEG XR ist ein kommendes Zubehör für die Meta Quest 3, das darauf abzielt, VR-Avatare ausdrucksvoller zu machen, ohne auf kamerabasiertes Gesichtstracking angewiesen zu sein – eine Funktion, die der Quest 3 (und Quest 3S) im Gegensatz zur Quest Pro fehlt. Das Gerät ersetzt das standardmäßige Facial Interface der Quest 3 durch einen Rahmen, der mit Sensoren ausgestattet ist. Diese Sensoren erfassen Biosignale aus dem Gesicht und der Stirn des Nutzers.
Wie funktioniert es?
Die erfassten Biosignale werden in eine Software gestreamt. Dort können sie so trainiert und gemappt werden, dass sie Avatar-Reaktionen, Mixed-Reality-Effekte oder experimentelle Steuerungen auslösen. Entwickler Ildar Rakhmatulin beschreibt PiEEG XR als ein Open-Source "Neural Face Interface" für Spatial Computing.
Nicht für den Endverbraucher (noch nicht)
Es ist wichtig zu verstehen, dass PiEEG XR kein fertiges Produkt für den sofortigen Konsum ist, das automatisch Emotionen erkennt und Avatare animiert. Vielmehr richtet es sich an Entwickler, Forscher, Pädagogen und VRChat-Experimentierfreudige. Diese Zielgruppe kann die Rohsignale nutzen, um eigene Mappings zu trainieren und zu erforschen. Ein Beispiel ist die Demonstration, bei der das System ein Lächeln erkennt und dieses auf den VR-Avatar überträgt.
Mehr als nur Gesichtsausdrücke
Die Möglichkeiten von PiEEG XR gehen über das bloße Nachbilden von Gesichtsausdrücken hinaus. In einer Reddit-Diskussion kam die Idee auf, ein drittes virtuelles Arm zu steuern. Der Entwickler bestätigte, dass genau solche Experimente mit PiEEG XR ermöglicht werden sollen. Durch OSC- oder WebSocket-Integrationen können Mappings von Gesichtssignalen, Fokus-Zuständen und anderen Biosignalen mit Avatar-Mechaniken verknüpft werden. Auch Fokus-zu-Aktion-Demos, bei denen die Signalintensität Mixed-Reality-Effekte auf digitale Objekte auslösen kann, sind möglich.
Ein Entwickler-Kit mit Potenzial
PiEEG XR ist nicht das erste neuronale Gerät des Unternehmens (IronBCI ist ein weiteres BCI). Es ist jedoch das erste, das speziell für die VR-Nutzung entwickelt wurde. Es stellt eine alternative Herangehensweise dar zu Metas eigenen Forschungen (z.B. Neural Band) oder kamerabasiertem Tracking. Die Herausforderungen bei einem headset-montierten neuronalen Interface umfassen Passform, Bewegung, Rauschen, Komfort, Kalibrierung und Software-Unterstützung.
Trotz dieser Herausforderungen sieht PiEEG XR vielversprechend aus als "hackable kit", um die Erkundung von Gesichts-Biosignalen für Entwickler und Forscher voranzutreiben.
Was haltet ihr von dieser innovativen Technologie für die Quest 3? Könnte sie die Art und Weise, wie wir in VR interagieren, verändern? #explorewithquest #QuestCreatorPartner