De Oculus Quest (zowel het originele als het tweede model^{(second model)} ) heeft een interessante geschiedenis van functies die worden toegevoegd lang nadat de hardware in het wild is uitgebracht. De meest bekende hiervan is Oculus Link , die de ^{(Oculus Link)}Quest in feite verandert in een Oculus Rift . Deze functie was zo succesvol dat Oculus besloot om al hun headsets, behalve de Quest , stop te zetten . 

Handtracking^(Hand) heeft Oculus Link niet helemaal gemaakt, maar het is nog steeds een geweldige functie met veel potentieel. Met handtracking heb je helemaal geen controllers nodig. Je eigen handen worden gedigitaliseerd in de VR-wereld! 

Als je een Quest hebt of overweegt er een te kopen, is het de moeite waard om te weten hoe handtracking werkt en wat het kan opleveren voor de VR-ervaring.

Hoe Quest de wereld volgt

De Oculus Quest maakt gebruik van een innovatieve benadering van bewegingsregistratie die gewoonlijk "binnenstebuiten" wordt genoemd, wat heel anders is dan hoe bewegingsregistratie in het verleden werkte. 

Toen de eerste headsets van de volgende generatie medio 2010 op de markt kwamen, maakten ze gebruik van een of meer externe trackingcamera's. Speciale motion tracking-lampjes op de headset vertelden de camera precies waar de headset zich ten opzichte van de headset bevond. Met wat slimme wiskunde kunnen die gegevens vervolgens worden omgezet in zeer nauwkeurige bewegingsregistratie in de 3D-ruimte. Zo bieden premium VR-headsets "zes vrijheidsgraden", ook wel 6DoF genoemd. 

Quest verplaatst de camerasensor op de headset zelf, in dit geval op strategische plekken op het apparaat. Andere headsets gebruiken mogelijk nog meer camera's om de nauwkeurigheid te verbeteren. Deze vier camera's laten de Quest naar de echte wereld om je heen kijken en bepalen wat je positie binnen die ruimte is. 

Daardoor is de Quest op zichzelf staand en draagbaar. Het is ook de functie waarmee hand-tracking met de Oculus in de eerste plaats mogelijk is.

De standaard Oculus Touch-controllers^{(Standard Oculus Touch Controllers)}

Om te begrijpen wat Oculus-handtracking zo indrukwekkend maakt, moeten we beginnen met de nogal alledaagse fysieke controllers die bij de Oculus Quest worden geleverd . Elk wordt volledig in beweging gevolgd door interne sensoren en speciale bewegingsmarkeringsmarkeringen die de ingebouwde camera's van de Quest vertellen waar de controllers zich bevinden ten opzichte van de headset.

Wanneer je de aanraakcontrollers in VR vasthoudt, worden ze met griezelige nauwkeurigheid gevolgd. Met behulp van de grip- en triggerknoppen op de controller kan VR-software een overtuigende ervaring creëren van het grijpen en manipuleren van items. Dit wordt met groot effect gebruikt in games als Half-Life Alyx en The Climb , waar aangrijpende items in de VR-wereld een centraal onderdeel van de gameplay vormen. 

De Touch Controllers bieden ook haptische feedback dankzij apparaten die "lineaire actuatoren" worden genoemd, die fysieke gevoelens kunnen creëren van tegen dingen aanbotsen, trillingen en andere aanrakingssensaties. Duimstokken en knoppen bieden ook een bekende manier om door een VR-ruimte te bewegen wanneer u zich fysiek niet in uw echte ruimte kunt verplaatsen.

Het grootste nadeel hiervan ten opzichte van handtracking is dat je haken voor handen hebt. Met je virtuele handen kun je simpele knijpbewegingen maken, maar daar blijft het dan ook bij. Het voelt niet als een grote beperking wanneer games rond de controllers worden ontworpen, maar handtracking opent een spectrum aan nieuwe mogelijkheden in VR.

Wat Oculus Hand-Tracking doet?

Als handtracking is ingeschakeld, ziet u een nauwkeurige weergave van uw echte handen in de VR-wereld. Elke beweging van je vingers of pols wordt weerspiegeld in hun virtuele dubbelgangers.

Handen volgen^{(Hand Tracking)} is niet langer een bètafunctie van Quest . Het is nu geïntegreerd in het besturingssysteem en veel first party Quest -applicaties. Het eerste grote voordeel hier is dat als je even snel je Quest wilt opzetten en een film wilt kijken in VR of door de app store wilt bladeren, je niet de moeite hoeft te doen om de aanraakcontrollers vast te maken. Met alleen uw handen hebt u toegang tot systeemmenu's en kunt u gemakkelijk navigeren.

Nu handtracking een officiële functie van Quest is, kunnen app-ontwikkelaars van derden het aan hun apps toevoegen. Er zijn al een aantal apps die uitstekend gebruik maken van de Oculus hand-tracking-functie, maar we zijn er zeker van dat ontwikkelaars nog veel meer opwindende manieren zullen vinden waarop directe hand-tracking de VR-ervaring kan transformeren

Hoe Oculus Hand-tracking werkt

De resultaten van handtracking zijn behoorlijk verbluffend, maar hoe werkt het eigenlijk? Het is duidelijk dat Oculus niet de exacte details van hun eigen oplossing zal publiceren, maar we kennen wel de technologieën en principes die erbij betrokken zijn.

Ten eerste zijn de ingebouwde camera's essentieel om handtracking te laten werken. Ze bieden niet alleen stereoscopische diepte-informatie, maar ook visuele gegevens voor verwerking door machinevisie. Wat is machinevisie? Het is een tak van kunstmatige intelligentie^{(artificial intelligence)} , met name een gebied dat bekend staat als machine learning. Het is dezelfde technologie waarmee de camera-app van je telefoon snel gezichten op een foto kan herkennen.

In wezen moet de software leren wat in de beeldgegevens van de camera een hand is en wat geen hand. Dit werd waarschijnlijk gedaan door de software duizenden en duizenden handen in verschillende omgevingen te laten zien totdat het een betrouwbare manier kon vinden om ze te onderscheiden van al het andere in je kamer.

Zodra de software nauwkeurige, realtime virtuele modellen van uw handen kan maken, kunnen app-ontwikkelaars ze gebruiken voor alles wat ze maar kunnen bedenken. U kunt objecten nu nauwkeurig manipuleren in VR!

Met de hand bijgehouden ervaringen die het proberen waard zijn

Als je een Oculus Quest hebt, kun je de Oculus -functie voor handtracking uitproberen zonder dat je een bepaalde app hoeft te kopen. Zoals hierboven vermeld, werkt het in de hoofdomgeving van Quest , evenals in een paar first-party apps. Als het gaat om ervaringen van derden, zijn er een paar die het vermelden waard zijn.

The Line is een verhalende ervaring van $ 4,99 die ook dient als een perfecte technische demo voor handtracking. Het vertelt het verhaal van een schaalmodelstad die op uurwerk en sporen loopt. 

Onze held Pedro is verliefd op Rosa , maar hij kan niet aan zijn lot ontsnappen. Tot er op een dag iets nieuws gebeurt. Je communiceert met hun schaalmodelwereld door je hand te gebruiken om aan knoppen te draaien, aan hendels te trekken en te friemelen met alles wat je kunt. Het is een lineaire, korte ervaring, maar kan in ongeveer 15 minuten op een zeer vermakelijke manier pronken met handtracking.

Waltz of the Wizard ($ 9,99) is een andere uitstekende showcase van de technologie. Je kunt je handen gebruiken om spreuken uit te spreken en te communiceren met zo ongeveer alles in de VR-wereld om je heen. Als je ooit de fantasie hebt willen beleven om een ​​tovenaar te zijn die bliksemschichten uit hun handen kan schieten, dan is dit het spel voor jou!

Wat vind je van handtracking op Quest ? Heb je het geprobeerd? Welke spellen zouden jullie aanraden? Deel^(Share) uw inzichten in de opmerkingen.

How Oculus Quest Hand Tracking Technology Works

The Oculus Quest (both the original and second model) have an interesting history of features being added long after the hardware is out in the wild. The most famous of these is Oculus Link, which effectively turns the Quest into an Oculus Rift. This feature was so successful that Oculus decided to discontinue all their headsets but the Quest. 

Hand tracking hasn’t made quite the splash Oculus Link did, but it’s still an amazing feature with lots of potential. With hand-tracking you don’t need controllers at all. Your own hands are digitized into the VR world! 

If you have a Quest or are thinking of buying one, it’s worth knowing how hand tracking works and what it can bring to the VR experience.

How Quest Tracks the World

The Oculus Quest uses an innovative approach towards motion tracking that’s commonly referred to as “inside-out” tracking, which is very different from how motion tracking worked in the past. 

When the first next-generation headsets were released in the mid-2010s, they made use of one or more external tracking cameras. Special motion tracking lights on the headset told the camera exactly where the headset was in relation to it. With some clever math, that data could then be converted to very accurate motion tracking in 3D space. This is how premium VR headsets offer “six degrees of freedom”, also known as 6DoF. 

Quest moves the camera sensor onto the headset itself, in this case placing them in strategic spots on the device. Other headsets may use even more cameras to improve accuracy. These four cameras let the Quest look at the real world around you and determine what your position is within that space. 

That’s what allows the Quest to be self-contained and portable. It’s also the feature that allows for hand-tracking with the Oculus to be possible in the first place..

The Standard Oculus Touch Controllers

To understand what makes Oculus hand tracking so impressive, we have to start with the rather mundane physical controllers that come with the Oculus Quest. Each one is fully motion-tracked by internal sensors and special motion tracking markers that tell the Quest’s onboard cameras where the controllers are relative to the headset.

When you’re holding the touch controllers in VR, they’re tracked with uncanny accuracy. Using the grip and trigger buttons on the controller, VR software can create a convincing experience of grabbing and manipulating items. This is used to great effect in games such as Half-Life Alyx and The Climb, where gripping items in the VR world is a central part of gameplay. 

The Touch Controllers also offer haptic feedback thanks to devices called “linear actuators”, which can create physical feelings of bumping into things, vibration and other touch sensations. Thumbsticks and buttons also offer a familiar way to move around a VR space when you can’t physically move about in your real space.

The main disadvantage of this compared to hand-tracking is that you have hooks for hands. You can perform simple pinching movements with your virtual hands, but that’s the extent of it. It doesn’t feel like a major limitation when games are designed around the controllers, but hand tracking opens a spectrum of new possibilities in VR.

What Oculus Hand-Tracking Does

When hand tracking is enabled, you’ll see an accurate representation of your real hands within the VR world. Each movement of your fingers or wrist will be reflected in their virtual doppelgangers.

Hand Tracking is no longer a beta feature of Quest. It’s now integrated into the operating system and many first party Quest applications. The first major benefit here is that if you just quickly want to put on your Quest and watch a movie in VR or browse around the app store, you don’t have to go through the effort of strapping on the touch controllers. Using just your hands, you can access system menus and navigate around with ease.

Now that hand-tracking is an official feature of Quest, third-party app developers can add it to their apps. There are already a number of apps that make excellent use of the Oculus hand-tracking feature, but we’re sure developers will find many more exciting ways in which direct hand-tracking can transform the VR experience

How Oculus Hand-tracking Works

The results of hand-tracking are pretty amazing, but how does it actually work? Obviously Oculus isn’t going to publish the exact details of their proprietary solution, but we do know the technologies and principles involved.

First, the on-board cameras are essential to making hand-tracking work. Not only do they provide stereoscopic depth information, but also visual data for processing by machine vision. What’s machine vision? It’s a branch of artificial intelligence, specifically a field known as machine learning. It’s the same technology that lets your phone’s camera app quickly identify faces in a photo.

Essentially, the software has to learn what in the image data provided by the camera is a hand and what isn’t a hand. This was probably done by showing the software thousands and thousands of hands in different environments until it could reliably figure out a fast and effective way of telling them apart from everything else in your room.

Once the software can create accurate, real-time virtual models of your hands, app developers can use them for anything they can think of. You can now precisely manipulate objects in VR!

Hand-tracked Experiences Worth Trying

If you own an Oculus Quest you can try out the Oculus hand-tracking feature without having to buy any particular app. As mentioned above, it works in the main Quest environment as well as a few first-party apps. When it comes to 3rd-party experiences, there are a few worth highlighting.

The Line is a $4.99 narrative experience that also serves as a perfect tech-demo for hand tracking. It tells the tale of a scale model town that runs on clockwork and tracks. 

Our hero Pedro is in love with Rosa, but he can’t escape his fate. Until something new happens one day. You interact with their scale model world by using your hand to turn knobs, pull levers and fiddle with everything that you can. It’s a linear, short experience, but can show off hand-tracking in a very entertaining way in about 15 minutes.

Waltz of the Wizard ($9.99) is another excellent showcase of the technology. You can use your hands to cast spells and interact with just about everything in the VR world around you. If you’ve ever wanted to live out the fantasy of being a wizard who can shoot bolts of lighting from their hands, this is the game for you!

What do you think of hand tracking on Quest? Have you tried it? Which games would you recommend? Share your insights in the comments.

Related posts

• Hoe speel je draadloze pc VR-games op Oculus Quest met virtuele desktop

• Hoe Xbox-streaming naar pc werkt

• Hoe SteamVR-spellen te spelen op Oculus Quest 2

• 8 beste gratis games op Oculus Quest 2

• Air Link instellen op Oculus Quest 2

• Virtualisatie inschakelen in MSI Gaming Plus Max B450

• Hoe u niet-Steam-spellen aan uw Steam-bibliotheek kunt toevoegen

• Monitor versus tv voor gamen? Is er een beste keuze?

• 5 beste controllers voor pc-gaming

• 6 tips en trucs voor nieuwe Oculus Quest 2-bezitters

• Drankjes brouwen in Minecraft

• Kun je een toetsenbord en muis gebruiken voor consolegaming?

• 8 pc-games met geweldige verhalen

• Beste mechanische toetsenborden voor gamen en werken voor pc met Windows 10

• Wat is de veilige modus van PS4 en wanneer moet u deze gebruiken?

• Twitch versus YouTube: wat is beter voor streaming?

• Wat betekent GG in gaming, chat en meer?

• 5 beste Android-gamingtelefoons die het waard zijn om te kopen in 2021

• Hoe een PS4-controller op een pc aan te sluiten?

• Hoe Minecraft Skin op pc of mobiel te veranderen