So funktioniert die Handtracking-Technologie von Oculus Quest

Die Oculus Quest (sowohl das Original- als auch das zweite Modell(second model) ) haben eine interessante Geschichte von Funktionen, die hinzugefügt wurden, lange nachdem die Hardware in freier Wildbahn war. Das bekannteste davon ist Oculus Link , das die (Oculus Link)Quest effektiv in ein Oculus Rift verwandelt . Diese Funktion war so erfolgreich, dass Oculus beschloss, alle ihre Headsets außer dem (Oculus)Quest einzustellen . 

Das Hand(Hand) - Tracking hat nicht ganz so viel Aufsehen erregt wie Oculus Link , aber es ist immer noch eine erstaunliche Funktion mit viel Potenzial. Mit Hand-Tracking benötigen Sie überhaupt keine Controller. Ihre eigenen Hände werden in die VR-Welt digitalisiert! 

Wenn Sie eine Quest haben oder darüber nachdenken, eine zu kaufen, sollten Sie wissen, wie Handtracking funktioniert und was es für das VR-Erlebnis bedeuten kann.

Wie Quest die Welt verfolgt

Die Oculus Quest verwendet einen innovativen Ansatz zur Bewegungsverfolgung, der allgemein als „Inside-Out“-Tracking bezeichnet wird und sich stark von der Funktionsweise der Bewegungsverfolgung in der Vergangenheit unterscheidet. 

Als die ersten Headsets der nächsten Generation Mitte der 2010er Jahre auf den Markt kamen, nutzten sie eine oder mehrere externe Tracking-Kameras. Spezielle Bewegungsverfolgungslichter am Headset sagten der Kamera genau, wo sich das Headset in Bezug darauf befand. Mit etwas cleverer Mathematik könnten diese Daten dann in eine sehr genaue Bewegungsverfolgung im 3D-Raum umgewandelt werden. So bieten Premium-VR-Headsets „sechs Freiheitsgrade“, auch bekannt als 6DoF. 

Quest bewegt den Kamerasensor auf das Headset selbst und platziert sie in diesem Fall an strategischen Stellen auf dem Gerät. Andere Headsets können sogar noch mehr Kameras verwenden, um die Genauigkeit zu verbessern. Diese vier Kameras lassen den Quest die reale Welt um Sie herum betrachten und bestimmen, wo sich Ihre Position in diesem Raum befindet. 

Dadurch kann der Quest eigenständig und tragbar sein. Es ist auch die Funktion, die es ermöglicht, dass Hand-Tracking mit dem Oculus überhaupt erst möglich ist.

Die Standard-Oculus Touch-Controller(Standard Oculus Touch Controllers)

Um zu verstehen, was das Oculus-Handtracking so beeindruckend macht, müssen wir mit den eher banalen physischen Controllern beginnen, die mit dem Oculus Quest geliefert(Oculus Quest) werden . Jeder wird von internen Sensoren und speziellen Bewegungsverfolgungsmarkern vollständig bewegungsverfolgt, die den Onboard-Kameras des Quest mitteilen, wo sich die Controller relativ zum Headset befinden.

Wenn Sie die Touch-Controller in VR halten, werden sie mit unheimlicher Genauigkeit verfolgt. Mithilfe der Griff- und Auslösetasten auf dem Controller kann die VR-Software ein überzeugendes Erlebnis beim Greifen und Manipulieren von Gegenständen schaffen. Dies wird in Spielen wie Half-Life Alyx und The Climb sehr effektiv genutzt , wo das Greifen von Gegenständen in der VR-Welt ein zentraler Bestandteil des Gameplays ist. 

Die Touch-Controller(Touch Controllers) bieten auch haptisches Feedback dank Geräten, die als „lineare Aktuatoren“ bezeichnet werden und physische Gefühle wie Anstoßen, Vibrationen und andere Berührungsempfindungen erzeugen können. Thumbsticks und Tasten bieten auch eine vertraute Möglichkeit, sich in einem VR-Raum zu bewegen, wenn Sie sich in Ihrem realen Raum nicht physisch bewegen können.

Der Hauptnachteil davon im Vergleich zum Hand-Tracking ist, dass Sie Haken für die Hände haben. Sie können mit Ihren virtuellen Händen einfache Kneifbewegungen ausführen, aber das ist der Umfang. Es fühlt sich nicht wie eine große Einschränkung an, wenn Spiele um die Controller herum entwickelt werden, aber Hand-Tracking eröffnet ein Spektrum neuer Möglichkeiten in VR.

Was Oculus Hand-Tracking macht

Wenn die Handverfolgung aktiviert ist, sehen Sie eine genaue Darstellung Ihrer echten Hände in der VR-Welt. Jede Bewegung Ihrer Finger oder Ihres Handgelenks wird in ihren virtuellen Doppelgängern reflektiert.

Handtracking ist keine Beta-Funktion von Quest mehr . Es ist jetzt in das Betriebssystem und viele First-Party- Quest - Anwendungen integriert. Der erste große Vorteil hier ist, dass Sie sich nicht die Mühe machen müssen, die Touch-Controller anzulegen, wenn Sie Ihre Quest(Quest) nur schnell anziehen und einen Film in VR ansehen oder im App Store stöbern möchten . Mit nur Ihren Händen können Sie auf Systemmenüs zugreifen und mühelos navigieren.

Jetzt, da Hand-Tracking eine offizielle Funktion von Quest ist, können App-Entwickler von Drittanbietern es zu ihren Apps hinzufügen. Es gibt bereits eine Reihe von Apps, die die Oculus(Oculus) -Hand-Tracking-Funktion hervorragend nutzen , aber wir sind sicher, dass Entwickler noch viele weitere spannende Möglichkeiten finden werden, wie direktes Hand-Tracking das VR-Erlebnis verändern kann

So funktioniert Oculus Hand-Tracking

Die Ergebnisse des Hand-Trackings sind ziemlich erstaunlich, aber wie funktioniert es eigentlich? Offensichtlich wird Oculus die genauen Details ihrer proprietären Lösung nicht veröffentlichen, aber wir kennen die beteiligten Technologien und Prinzipien.

Erstens sind die Bordkameras unerlässlich, damit die Handverfolgung funktioniert. Sie liefern nicht nur stereoskopische Tiefeninformationen, sondern auch visuelle Daten zur Verarbeitung durch maschinelles Sehen. Was ist maschinelles Sehen? Es ist ein Zweig der künstlichen Intelligenz(artificial intelligence) , insbesondere ein Bereich, der als maschinelles Lernen bekannt ist. Es ist dieselbe Technologie, mit der die Kamera-App Ihres Telefons Gesichter auf einem Foto schnell erkennen kann.

Im Wesentlichen muss die Software lernen, was in den von der Kamera gelieferten Bilddaten eine Hand ist und was nicht. Dies geschah wahrscheinlich, indem der Software Tausende und Abertausende von Händen in verschiedenen Umgebungen gezeigt wurden, bis sie zuverlässig einen schnellen und effektiven Weg finden konnte, sie von allem anderen in Ihrem Raum zu unterscheiden.

Sobald die Software genaue virtuelle Modelle Ihrer Hände in Echtzeit erstellen kann, können App-Entwickler sie für alles verwenden, was ihnen einfällt. Sie können jetzt Objekte in VR präzise manipulieren!

Von Hand aufgezeichnete Erfahrungen, die es wert sind, ausprobiert zu werden

Wenn Sie eine Oculus Quest besitzen, können Sie die (Oculus Quest)Oculus -Handtracking-Funktion ausprobieren, ohne eine bestimmte App kaufen zu müssen. Wie oben erwähnt, funktioniert es in der Hauptumgebung von Quest sowie in einigen Apps von Erstanbietern. Wenn es um Erfahrungen von Drittanbietern geht, gibt es einige, die es wert sind, hervorgehoben zu werden.

The Line ist ein narratives Erlebnis für 4,99 US-Dollar, das auch als perfekte Tech-Demo für Handtracking dient. Es erzählt die Geschichte einer maßstabsgetreuen Modellstadt, die auf Uhrwerk und Gleisen läuft. 

Unser Held Pedro ist in (Pedro)Rosa verliebt , aber er kann seinem Schicksal nicht entkommen. Bis eines Tages etwas Neues passiert. Sie interagieren mit ihrer maßstabsgetreuen Modellwelt, indem Sie mit Ihrer Hand an Knöpfen drehen, Hebel ziehen und mit allem herumspielen, was Sie können. Es ist eine lineare, kurze Erfahrung, kann aber in etwa 15 Minuten auf sehr unterhaltsame Weise Hand-Tracking zeigen.

Waltz of the Wizard (9,99 $) ist ein weiteres hervorragendes Schaufenster der Technologie. Sie können Ihre Hände verwenden, um Zauber zu wirken und mit fast allem in der VR-Welt um Sie herum zu interagieren. Wenn Sie schon immer die Fantasie ausleben wollten, ein Zauberer zu sein, der Blitze aus seinen Händen schießen kann, ist dies das richtige Spiel für Sie!

Was hältst du von Handtracking auf Quest ? Hast du es versucht? Welche Spiele würdet ihr empfehlen? Teilen(Share) Sie Ihre Erkenntnisse in den Kommentaren.



Thorsten Roth

About the author

Ich bin Informatiker mit den Schwerpunkten Datenschutz und Benutzerkonten und Familiensicherheit. Ich habe in den letzten Jahren an der Verbesserung der Smartphone-Sicherheit gearbeitet und habe Erfahrung in der Zusammenarbeit mit Gaming-Unternehmen. Ich habe auch mehrfach über die Probleme im Zusammenhang mit Benutzerkonten und Spielen geschrieben.


Related posts