Funktionsweise der Oculus Quest Hand Tracking-Technologie


Die Oculus Quest (sowohl das Original als auch zweites Modell ) haben eine interessante Geschichte von Funktionen, die hinzugefügt wurden, lange nachdem die Hardware in der Wildnis war. Das bekannteste davon ist Oculus Link, was die Quest effektiv in einen Oculus Rift verwandelt. Diese Funktion war so erfolgreich, dass Oculus beschloss, alle Headsets außer dem Quest einzustellen.

Hand-Tracking hat nicht so viel Aufsehen erregt wie Oculus Link, aber es ist immer noch eine erstaunliche Funktion mit viel Potenzial. Mit Hand-Tracking benötigen Sie überhaupt keine Controller. Ihre eigenen Hände werden in die VR-Welt digitalisiert!

Wenn Sie eine haben Wenn Sie eine Quest kaufen oder daran denken, eine zu kaufen, sollten Sie wissen, wie Hand-Tracking funktioniert und was es für die VR-Erfahrung bedeuten kann.

Wie Quest die Welt verfolgt

Die Oculus Quest verwendet eine innovative Ansatz zur Bewegungsverfolgung, der allgemein als "Inside-Out" -Verfolgung bezeichnet wird und sich stark von der Funktionsweise der Bewegungsverfolgung in der Vergangenheit unterscheidet.

Als Mitte der 2010er Jahre die ersten Headsets der nächsten Generation auf den Markt kamen, verwendeten sie eine oder mehrere externe Tracking-Kameras. Spezielle Bewegungsverfolgungslichter am Headset sagten der Kamera genau, wo sich das Headset in Bezug darauf befand. Mit etwas cleverer Mathematik könnten diese Daten dann in eine sehr genaue Bewegungsverfolgung im 3D-Raum konvertiert werden. Auf diese Weise bieten Premium-VR-Headsets „sechs Freiheitsgrade“, auch als 6DoF bekannt.

Quest bewegt die Kamera Sensor auf das Headset selbst, in diesem Fall platzieren Sie sie an strategischen Stellen auf dem Gerät. Andere Headsets verwenden möglicherweise noch mehr Kameras, um die Genauigkeit zu verbessern. Mit diesen vier Kameras kann die Quest die reale Welt um Sie herum betrachten und Ihre Position in diesem Raum bestimmen.

Dadurch kann die Quest in sich geschlossen und portabel sein. Es ist auch die Funktion, mit der Handverfolgung mit dem Oculus überhaupt möglich ist.

Die Standard-Oculus Touch-Controller

Um zu verstehen, was Oculus Handverfolgung so beeindruckend macht Wir müssen mit den eher banalen physischen Controllern beginnen, die mit Oculus Quest geliefert werden. Jeder wird vollständig von internen Sensoren und speziellen Bewegungsverfolgungsmarkierungen verfolgt, die den Bordkameras des Quest mitteilen, wo sich die Controller relativ zum Headset befinden.

Wenn Sie die Touch-Controller in VR halten, werden sie werden mit unheimlicher Genauigkeit verfolgt. Mit den Griff- und Auslösetasten am Controller kann die VR-Software ein überzeugendes Erlebnis beim Greifen und Bearbeiten von Gegenständen schaffen. Dies wird in Spielen wie Halbwertszeit Alyx und Der Anstieg sehr effektiv eingesetzt, bei denen das Ergreifen von Gegenständen in der VR-Welt ein zentraler Bestandteil des Gameplays ist.

Auch die Touch-Controller bieten haptisches Feedback dank Geräten, die als „Linearantriebe“ bezeichnet werden und physische Gefühle von Stößen, Vibrationen und anderen Berührungsempfindungen hervorrufen können. Daumenstifte und Schaltflächen bieten auch eine vertraute Möglichkeit, sich in einem VR-Raum zu bewegen, wenn Sie sich in Ihrem realen Raum nicht physisch bewegen können.

Der Hauptnachteil gegenüber der Handverfolgung besteht darin, dass Sie Haken für die Hände haben. Sie können mit Ihren virtuellen Händen einfache Kneifbewegungen ausführen, aber das ist das Ausmaß. Es scheint keine große Einschränkung zu sein, wenn Spiele rund um die Controller entwickelt werden, aber Hand-Tracking eröffnet ein Spektrum neuer Möglichkeiten in VR.

Was macht Oculus Hand-Tracking

Wann Wenn die Handverfolgung aktiviert ist, sehen Sie eine genaue Darstellung Ihrer realen Hände in der VR-Welt. Jede Bewegung Ihrer Finger oder Ihres Handgelenks spiegelt sich in ihren virtuellen Doppelgängern wider.

Hand Tracking ist keine Beta-Funktion von Quest mehr. Es ist jetzt in das Betriebssystem und viele Erstanbieter-Quest-Anwendungen integriert. Der erste große Vorteil dabei ist, dass Sie sich nicht die Mühe machen müssen, die Touch-Controller anzulegen, wenn Sie nur schnell Ihre Quest starten und einen Film in VR ansehen oder im App Store stöbern möchten. Mit nur Ihren Händen können Sie problemlos auf Systemmenüs zugreifen und navigieren.

Da die Handverfolgung eine offizielle Funktion von Quest ist, können App-Entwickler von Drittanbietern sie ihren Apps hinzufügen. Es gibt bereits eine Reihe von Apps, die die Oculus Hand-Tracking-Funktion hervorragend nutzen. Wir sind jedoch sicher, dass Entwickler noch viele weitere aufregende Möglichkeiten finden werden, wie direktes Hand-Tracking das VR-Erlebnis verändern kann.

Wie Oculus Hand-Tracking funktioniert

Die Ergebnisse des Hand-Trackings sind erstaunlich, aber wie funktioniert es tatsächlich? Natürlich wird Oculus nicht die genauen Details seiner proprietären Lösung veröffentlichen, aber wir kennen die Technologien und Prinzipien.

Erstens sind die Bordkameras unerlässlich, damit die Handverfolgung funktioniert. Sie liefern nicht nur stereoskopische Tiefeninformationen, sondern auch visuelle Daten für die maschinelle Bildverarbeitung. Was ist Bildverarbeitung? Es ist ein Zweig von künstliche Intelligenz, insbesondere ein Bereich, der als maschinelles Lernen bekannt ist. Mit derselben Technologie kann die Kamera-App Ihres Telefons Gesichter auf einem Foto schnell identifizieren.

Im Wesentlichen muss die Software lernen, was in den von der Kamera bereitgestellten Bilddaten eine Hand ist und was keine Hand. Dies wurde wahrscheinlich dadurch erreicht, dass der Software Tausende und Abertausende von Händen in verschiedenen Umgebungen gezeigt wurden, bis eine zuverlässige und effektive Methode gefunden wurde, um sie von allem anderen in Ihrem Raum zu unterscheiden.

Sobald die Software erstellt werden kann App-Entwickler können präzise virtuelle Echtzeitmodelle Ihrer Hände für alles verwenden, was ihnen einfällt. Sie können jetzt Objekte in VR präzise bearbeiten!

Handverfolgte Erfahrungen, die es wert sind, ausprobiert zu werden

Wenn Sie eine Oculus Quest besitzen, können Sie die Oculus Handverfolgungsfunktion ausprobieren, ohne eine kaufen zu müssen bestimmte App. Wie oben erwähnt, funktioniert es in der Haupt-Quest-Umgebung sowie in einigen Erstanbieter-Apps. Wenn es um Erfahrungen von Drittanbietern geht, gibt es einige, die es wert sind, hervorgehoben zu werden.

12.ist eine narrative Erfahrung im Wert von 4,99 US-Dollar, die auch als perfekte Tech-Demo für die Handverfolgung dient. Es erzählt die Geschichte einer maßstabsgetreuen Modellstadt, die auf Uhrwerk und Schienen läuft.

Unser Held Pedro ist in Rosa verliebt, aber er kann seinem Schicksal nicht entkommen. Bis eines Tages etwas Neues passiert. Sie interagieren mit ihrer maßstabsgetreuen Modellwelt, indem Sie mit Ihrer Hand Knöpfe drehen, Hebel ziehen und mit allem herumspielen, was Sie können. Es ist eine lineare, kurze Erfahrung, kann aber die Handverfolgung in etwa 15 Minuten auf sehr unterhaltsame Weise demonstrieren.

Walzer des Zauberers (9,99 USD) ist ein weiteres hervorragendes Beispiel für diese Technologie. Sie können Ihre Hände verwenden, um Zauber zu wirken und mit fast allem in der VR-Welt um Sie herum zu interagieren. Wenn Sie schon immer die Fantasie eines Zauberers ausleben wollten, der Lichtblitze aus seinen Händen schießen kann, ist dies das richtige Spiel für Sie!

Was halten Sie von Hand-Tracking bei Quest? Hast du es versucht? Welche Spiele würdest du empfehlen? Teilen Sie Ihre Erkenntnisse in den Kommentaren mit.

Zusammenhängende Posts:


11.03.2021