Inilabas ng Apple ang pinaka-inaasahan nitong Apple Vision Pro mixed-reality headset sa panahon ng WWDC 2023 keynote address nito noong Lunes. Kung napanood mo ang pagtatanghal, malamang na napansin mo na ang bagong”spatial computing”na device ng Apple ay hindi gumagamit ng pisikal na keyboard, mouse, o joystick controller para mag-input ng impormasyon at kontrolin ang mga feature ng device.
Sa isang kamakailang sesyon ng developer, ipinakita ng Apple ang mga built-in na galaw na ay ginagamit upang makipag-ugnayan sa Vision Pro:
I-tap – Kapag tinapik mo ang iyong hinlalaki at hintuturo nang magkasama, sinenyasan mo ang headset na nais mong mag-tap sa isang elemento sa virtual na espasyo na iyong kinaroroonan. pagtingin sa display ng headset. Sinimulan na ng ilang user na tawagin itong isang pakurot. Ipinaliwanag ng Apple na ito ang virtual na katumbas ng kapag nag-tap ka sa screen ng iyong iPhone.Double Tap – Ang pag-double tap ng daliri ay nagsasagawa ng double-tap na galaw. (Mukhang lohikal.)Kurot at Pindutin – Binibigyang-daan ka ng isang kurot at pagpigil na galaw na magsagawa ng mga gawain tulad ng pag-highlight ng on-screen na text.Kurot at I-drag – Sa pamamagitan ng pag-pinch at pag-drag sa iyo Magagawang mag-scroll at lumipat sa paligid ng mga bintana, parehong pahalang at patayo, mas mabilis mong igalaw ang iyong kamay, mas mabilis kang mag-scroll.Zoom – Ang zoom ay isang kilos na gumagamit ng magkabilang kamay, isa sa dalawang kilos na nangangailangan nito. Sa pamamagitan ng pagkurot ng iyong mga daliri at paghiwalayin ang iyong mga kamay, mag-zoom in ka sa isang elemento. Mag-drag ng window sa sulok upang ayusin ang mga laki ng window.I-rotate – Ang rotate ay ang iba pang dalawang kamay na kilos. Kurutin lang ang iyong mga daliri at paikutin ang iyong mga kamay. Binibigyang-daan ka nitong manipulahin ang mga bagay sa virtual space na nakikita sa screen ng headset.
Dahil maraming camera sa Vision Pro, masusubaybayan nito ang mga galaw ng iyong mata, na matukoy kung saan ka tumitingin nang may tumpak na katumpakan. Nakakatulong ang posisyon ng iyong mata na i-target ang mga elementong gusto mong makipag-ugnayan sa pamamagitan ng mga galaw ng kamay.
Ang mga “jazz hands” ay Hindi kinakailangan sa Vision Pro, dahil ang mga galaw ng kamay ay maaaring panatilihing banayad sa halip na gumawa ng mga dakilang galaw. Sinasabi pa ng Apple sa mga user na maaari nilang panatilihin ang kanilang mga kamay sa kanilang kandungan, dahil mapipigilan nito ang kanilang mga braso na mapagod sa pamamagitan ng paghawak sa harap nila. Ang iba pang mga kilos ay katulad na maliit; halimbawa, ang isang maliit na galaw ng kurot ay kapareho ng isang tapikin. Ang lahat ng ito ay dahil sa tumpak na kakayahan sa pagsubaybay ng mga camera.
Madaling mapili at mamanipula ang mga bagay na malapit at malayo sa pamamagitan lamang ng pag-abot at paggamit ng iyong mga kamay upang makipag-ugnayan sa isang virtual na bagay.
Sinasabi ng Apple na sinusuportahan din ng headset ang iba pang paggalaw ng kamay, kabilang ang air typing. Sa kasamaang palad, ang mga masuwerteng iilan na nagkaroon ng pagkakataong gumugol ng oras sa isang unit ay nagsasabing hindi nila nasubukan ang feature na ito.
Ang mga galaw ay maaari ding”salansan”o gamitin nang magkasama. Para gumawa ng drawing, tingnan lang ang isang spot sa virtual canvas, pumili ng brush gamit ang iyong kamay, pagkatapos ay gumuhit sa hangin gamit ang isa pang kilos.
Magkakaroon ang mga developer ng kakayahang gumawa ng mga custom na galaw para magamit sa kanilang mga app. Kakailanganin ng mga developer na tiyakin na ang kanilang mga galaw ay naiiba sa mga default na galaw ng system o mula sa mga karaniwang galaw ng kamay na maaaring gamitin ng mga tao. Ang mga kilos ay dapat ding ulitin nang walang pilit ng kamay.
Ang Vision Pro ay katugma din sa mga Bluetooth trackpad at mouse, keyboard, at controller ng laro. Bahagi rin ng system ang pagdidikta at mga tool sa paghahanap na nakabatay sa boses.
