Ako funguje technológia sledovania rúk Oculus Quest

Oculus Quest ( pôvodný aj druhý model(second model) ) má zaujímavú históriu pridávania funkcií dlho po tom, čo sa hardvér dostane do divočiny. Najznámejší z nich je Oculus Link , ktorý efektívne mení Quest na Oculus Rift . Táto funkcia bola taká úspešná, že sa Oculus rozhodol ukončiť výrobu všetkých ich náhlavných súprav okrem Questu(Quest)

Sledovanie rúk(Hand) nedosiahlo taký efekt ako Oculus Link , ale stále je to úžasná funkcia s veľkým potenciálom. S ručným sledovaním vôbec nepotrebujete ovládače. Vaše vlastné ruky sú digitalizované do sveta VR! 

Ak máte Quest alebo uvažujete o jeho kúpe, stojí za to vedieť, ako funguje sledovanie rúk a čo môže priniesť do zážitku z VR.

Ako Quest sleduje svet

Oculus Quest využíva inovatívny prístup k sledovaniu pohybu, ktorý sa bežne označuje ako sledovanie „zvnútra von“, čo je veľmi odlišné od toho, ako sledovanie pohybu fungovalo v minulosti. 

Keď boli v polovici roku 2010 uvedené prvé náhlavné súpravy novej generácie, používali jednu alebo viac externých sledovacích kamier. Špeciálne svetlá na sledovanie pohybu na náhlavnej súprave povedali kamere presne, kde sa náhlavná súprava vo vzťahu k nej nachádza. Pomocou šikovnej matematiky by sa tieto údaje dali previesť na veľmi presné sledovanie pohybu v 3D priestore. Takto ponúkajú prémiové náhlavné súpravy VR „šesť stupňov voľnosti“, známe tiež ako 6DoF. 

Quest presunie snímač kamery na samotný headset, v tomto prípade ich umiestni na strategické miesta na zariadení. Iné náhlavné súpravy môžu na zlepšenie presnosti používať ešte viac kamier. Tieto štyri kamery umožňujú Questu(Quest) pozerať sa na skutočný svet okolo vás a určiť, aká je vaša poloha v tomto priestore. 

To umožňuje, aby bol Quest samostatný a prenosný. Je to tiež funkcia, ktorá v prvom rade umožňuje ručné sledovanie pomocou Oculusu .(Oculus)

Štandardné dotykové ovládače Oculus(Standard Oculus Touch Controllers)

Aby sme pochopili, prečo je sledovanie rúk Oculus také pôsobivé, musíme začať s pomerne všednými fyzickými ovládačmi, ktoré sa dodávajú s Oculus Quest . Každý z nich je plne sledovaný vnútornými senzormi a špeciálnymi značkami na sledovanie pohybu, ktoré hovoria palubným kamerám Questu, kde sú ovládače vzhľadom na náhlavnú súpravu.

Keď vo VR držíte dotykové ovládače, sú sledované s neskutočnou presnosťou. Pomocou tlačidiel uchopenia a spúšte na ovládači dokáže softvér VR vytvoriť presvedčivý zážitok z uchopenia predmetov a manipulácie s nimi. Toto sa s veľkým efektom používa v hrách ako Half-Life Alyx a The Climb , kde je uchopenie predmetov vo svete VR ústrednou súčasťou hry. 

Dotykové ovládače(Touch Controllers) tiež ponúkajú haptickú spätnú väzbu vďaka zariadeniam nazývaným „lineárne ovládače“, ktoré môžu vytvárať fyzické pocity narážania do vecí, vibrácií a iných dotykových vnemov. Palety a tlačidlá tiež ponúkajú známy spôsob, ako sa pohybovať po priestore VR, keď sa nemôžete fyzicky pohybovať vo svojom skutočnom priestore.

Hlavnou nevýhodou v porovnaní s ručným sledovaním je, že máte háčiky na ruky. Pomocou virtuálnych rúk môžete vykonávať jednoduché štipľavé pohyby, ale to je rozsah. Nezdá sa to ako veľké obmedzenie, keď sú hry navrhnuté okolo ovládačov, no sledovanie rúk otvára spektrum nových možností vo VR.

Čo robí Oculus Hand-Tracking

Keď je zapnuté sledovanie rúk, uvidíte presnú reprezentáciu svojich skutočných rúk vo svete VR. Každý pohyb vašich prstov alebo zápästia sa odrazí v ich virtuálnych dvojníkoch.

Sledovanie rúk(Hand Tracking) už nie je beta funkciou Questu(Quest) . Teraz je integrovaný do operačného systému a mnohých aplikácií Quest prvej strany . Prvou hlavnou výhodou je, že ak si chcete len rýchlo obliecť svoj Quest a pozrieť si film vo VR alebo si prezerať obchod s aplikáciami, nemusíte sa snažiť pripínať si dotykové ovládače. Pomocou rúk môžete ľahko pristupovať k systémovým ponukám a pohybovať sa v nich.

Teraz, keď je sledovanie rúk oficiálnou funkciou Quest , vývojári aplikácií tretích strán ho môžu pridať do svojich aplikácií. Existuje už množstvo aplikácií, ktoré vynikajúco využívajú funkciu sledovania rúk Oculus , ale sme si istí, že vývojári nájdu oveľa viac vzrušujúcich spôsobov, ktorými môže priame sledovanie rúk zmeniť zážitok z VR.

Ako funguje sledovanie rúk Oculus

Výsledky ručného sledovania sú celkom úžasné, ale ako to vlastne funguje? Je zrejmé , že spoločnosť Oculus nezverejní presné podrobnosti o ich patentovanom riešení, ale poznáme príslušné technológie a princípy.

Po prvé, palubné kamery sú nevyhnutné na fungovanie sledovania rúk. Poskytujú nielen informácie o stereoskopickej hĺbke, ale aj vizuálne údaje na spracovanie strojovým videním. Čo je strojové videnie? Je to odvetvie umelej inteligencie(artificial intelligence) , konkrétne oblasť známa ako strojové učenie. Ide o rovnakú technológiu, ktorá umožňuje aplikácii fotoaparátu vášho telefónu rýchlo identifikovať tváre na fotografii.

Softvér sa v podstate musí naučiť, čo v obrazových údajoch poskytnutých fotoaparátom je ruka a čo nie. Pravdepodobne to bolo vykonané tak, že softvér ukázal tisíce a tisíce rúk v rôznych prostrediach, kým sa mu nepodarilo spoľahlivo nájsť rýchly a efektívny spôsob, ako ich odlíšiť od všetkého ostatného vo vašej izbe.

Keď softvér dokáže vytvoriť presné virtuálne modely vašich rúk v reálnom čase, vývojári aplikácií ich môžu použiť na čokoľvek, čo im napadne. Teraz môžete presne manipulovať s objektmi vo VR!

Ručne sledované zážitky, ktoré sa oplatí vyskúšať

Ak vlastníte Oculus Quest , môžete vyskúšať funkciu Oculus ručného sledovania bez toho, aby ste si museli kupovať nejakú konkrétnu aplikáciu. Ako je uvedené vyššie, funguje to v hlavnom prostredí Quest , ako aj v niekoľkých aplikáciách prvej strany. Pokiaľ ide o zážitky tretích strán, je potrebné zdôrazniť niekoľko.

The Line je naratívny zážitok za 4,99 $, ktorý tiež slúži ako dokonalé technologické demo na sledovanie rúk. Rozpráva príbeh o zmenšenom meste, ktoré beží na hodinovom stroji a dráhach. 

Náš hrdina Pedro je zamilovaný do Rosy(Rosa) , no nemôže uniknúť svojmu osudu. Až kým sa jedného dňa nestane niečo nové. Môžete komunikovať s ich svetom zmenšených modelov tak, že budete otáčať gombíkmi, ťahať páky a hrať sa so všetkým, čo môžete. Je to lineárna, krátka skúsenosť, ale dokáže predviesť ručné sledovanie veľmi zábavným spôsobom za približne 15 minút.

Waltz of the Wizard (9,99 dolárov) je ďalšou vynikajúcou ukážkou technológie. Pomocou rúk môžete čarovať a komunikovať takmer so všetkým vo svete VR okolo vás. Ak ste niekedy chceli prežiť fantáziu byť čarodejníkom, ktorý dokáže strieľať blesky z rúk, toto je hra pre vás!

Čo si myslíte o sledovaní rúk na Quest ? Skúšali ste to? Ktoré hry by ste odporučili? Podeľte(Share) sa o svoje postrehy v komentároch.



About the author

Som Windows MVP a pracujem s Windows od roku 2007. Moje skúsenosti zahŕňajú vývoj softvéru, hardvéru a zvuku a aplikácií pre Windows. Vždy hľadám najlepšie spôsoby, ako zlepšiť používateľskú skúsenosť pri mojej práci, takže ak potrebujete pomôcť s návrhom alebo vývojom softvérovej aplikácie, určite môžem ponúknuť svoje služby.



Related posts