Hur Oculus Quest Hand Tracking Technology fungerar

Oculus Quest(Oculus Quest) (både originalmodellen och andra modellen(second model) ) har en intressant historia av funktioner som lagts till långt efter att hårdvaran är ute i naturen. Den mest kända av dessa är Oculus Link , som effektivt förvandlar Quest till en Oculus Rift . Den här funktionen var så framgångsrik att Oculus bestämde sig för att lägga ner alla deras headset utom Quest . 

Handspårning(Hand) har inte gjort riktigt det stänk Oculus Link gjorde, men det är fortfarande en fantastisk funktion med massor av potential. Med handspårning behöver du inga kontroller alls. Dina egna händer är digitaliserade till VR-världen! 

Om du har en Quest eller funderar på att köpa en, är det värt att veta hur handspårning fungerar och vad det kan tillföra VR-upplevelsen.

Hur Quest spårar världen

Oculus Quest(Oculus Quest) använder sig av ett innovativt tillvägagångssätt för rörelsespårning som vanligtvis kallas "inifrån och ut", vilket skiljer sig mycket från hur rörelsespårning fungerade tidigare. 

När de första nästa generations headset släpptes i mitten av 2010-talet använde de sig av en eller flera externa spårningskameror. Särskilda rörelsespårningslampor på headsetet berättade för kameran exakt var headsetet var i förhållande till det. Med lite smart matematik kunde denna data sedan konverteras till mycket exakt rörelsespårning i 3D-rymden. Det är så premium VR-headset erbjuder "sex grader av frihet", även känd som 6DoF. 

Quest flyttar kamerasensorn till själva headsetet och placerar dem i det här fallet på strategiska platser på enheten. Andra headset kan använda ännu fler kameror för att förbättra noggrannheten. Dessa fyra kameror låter Quest titta på den verkliga världen omkring dig och avgöra vad din position är inom det utrymmet. 

Det är det som gör att Quest kan vara fristående och bärbar. Det är också funktionen som gör att handspårning med Oculus är möjlig i första hand.

Standard Oculus Touch-kontroller(Standard Oculus Touch Controllers)

För att förstå vad som gör Oculus-handspårning så imponerande måste vi börja med de ganska vardagliga fysiska kontrollerna som följer med Oculus Quest . Var och en är helt rörelsespårad av interna sensorer och speciella rörelsespårningsmarkörer som talar om för Quests inbyggda kameror var kontrollerna är i förhållande till headsetet.

När du håller pekkontrollerna i VR spåras de med otrolig noggrannhet. Med hjälp av grepp- och avtryckarknapparna på handkontrollen kan VR-programvaran skapa en övertygande upplevelse av att greppa och manipulera föremål. Detta används med stor effekt i spel som Half-Life Alyx och The Climb , där gripande föremål i VR-världen är en central del av spelet. 

Touch Controllers(Touch Controllers) erbjuder också haptisk feedback tack vare enheter som kallas "linjära ställdon", som kan skapa fysiska känslor av att stöta på saker, vibrationer och andra beröringssensationer. Tumpinnar och knappar erbjuder också ett välbekant sätt att flytta runt i ett VR-utrymme när du inte fysiskt kan röra dig i ditt verkliga utrymme.

Den största nackdelen med detta jämfört med hand-tracking är att du har krokar för händer. Du kan utföra enkla nypningsrörelser med dina virtuella händer, men det är omfattningen av det. Det känns inte som en större begränsning när spel är designade kring kontrollerna, men handspårning öppnar ett spektrum av nya möjligheter i VR.

Vad Oculus Hand-Tracking gör

När handspårning är aktiverat kommer du att se en korrekt representation av dina riktiga händer i VR-världen. Varje rörelse av dina fingrar eller handled kommer att återspeglas i deras virtuella dubbelgångare.

Handspårning(Hand Tracking) är inte längre en betafunktion i Quest . Det är nu integrerat i operativsystemet och många förstaparts Quest- applikationer. Den första stora fördelen här är att om du bara snabbt vill sätta på dig din Quest och se en film i VR eller surfa runt i appbutiken, behöver du inte gå igenom ansträngningen att spänna fast touchkontrollerna. Med bara dina händer kan du komma åt systemmenyer och navigera runt med lätthet.

Nu när handspårning är en officiell funktion i Quest , kan tredjepartsapputvecklare lägga till den i sina appar. Det finns redan ett antal appar som har utmärkt användning av Oculus handspårningsfunktion, men vi är säkra på att utvecklare kommer att hitta många fler spännande sätt på vilka direkt handspårning kan förvandla VR-upplevelsen

Hur Oculus Hand-tracking fungerar

Resultaten av handspårning är ganska fantastiska, men hur fungerar det egentligen? Oculus kommer uppenbarligen(Oculus) inte att publicera de exakta detaljerna om deras egenutvecklade lösning, men vi känner till teknologierna och principerna som är involverade.

För det första är kamerorna ombord viktiga för att få handspårning att fungera. De tillhandahåller inte bara stereoskopisk djupinformation, utan också visuella data för bearbetning av maskinseende. Vad är maskinseende? Det är en gren av artificiell intelligens(artificial intelligence) , specifikt ett område som kallas maskininlärning. Det är samma teknik som gör att telefonens kameraapp snabbt kan identifiera ansikten på ett foto.

I huvudsak måste programvaran lära sig vad i bilddata som tillhandahålls av kameran som är en hand och vad som inte är en hand. Detta gjordes förmodligen genom att visa mjukvaran tusentals och åter tusentals händer i olika miljöer tills den på ett tillförlitligt sätt kunde hitta ett snabbt och effektivt sätt att skilja dem från allt annat i ditt rum.

När programvaran kan skapa korrekta virtuella modeller i realtid av dina händer, kan apputvecklare använda dem för allt de kan tänka sig. Du kan nu manipulera objekt exakt i VR!

Handspårade upplevelser värda att prova

Om du äger en Oculus Quest kan du prova Oculus handspårningsfunktion utan att behöva köpa någon speciell app. Som nämnts ovan fungerar det i huvudmiljön Quest såväl som i några förstapartsappar. När det gäller upplevelser från tredje part finns det några som är värda att lyfta fram.

The Line är en berättande upplevelse på $4,99 som också fungerar som en perfekt teknisk demo för handspårning. Den berättar historien om en skalenlig modellstad som går på urverk och spår. 

Vår hjälte Pedro är kär i Rosa , men han kan inte undkomma sitt öde. Tills det händer något nytt en dag. Du interagerar med deras skalenliga modellvärld genom att använda din hand för att vrida på knoppar, dra i spakar och pilla med allt du kan. Det är en linjär, kort upplevelse, men kan visa upp handspårning på ett mycket underhållande sätt på cirka 15 minuter.

Waltz of the Wizard ($9,99) är en annan utmärkt presentation av tekniken. Du kan använda dina händer för att besvärja dig och interagera med nästan allt i VR-världen omkring dig. Om du någonsin har velat leva ut fantasin om att vara en trollkarl som kan skjuta ljusbultar från sina händer, är det här spelet för dig!

Vad tycker du om handspårning på Quest ? Har du provat det? Vilka spel skulle du rekommendera? Dela(Share) dina insikter i kommentarerna.



Claes Öberg

About the author

Jag är en mjukvaruingenjör med erfarenhet av både Chrome och spelapplikationer. Jag har jobbat med lösningar för webbläsaren Google Chrome de senaste 4 åren och har även jobbat med spel för flera olika plattformar. Mina kunskaper ligger i att designa, testa och hantera mjukvaruprojekt. Utöver mitt arbete som mjukvaruingenjör har jag även erfarenhet av sekretess, användarkonton och familjesäkerhetsfrågor.


Related posts