Apps op Vision Pro
Zelfs voordat Apple Vision Pro werd aangekondigd, hadden onderzoekers de effectiviteit bestudeerd van wat bleek de door Apple gekozen bedieningselementen voor de headset te zijn.
Zoals voor het eerst onthuld op WWDC, selecteert Vision Pro automatisch waar een gebruiker naar kijkt op het scherm. En dan detecteren de omringende camera’s wanneer die gebruiker een knijpende beweging maakt om effectief op het object te tikken of klikken.
Zeggen dat”we geen idee hadden”dat Apple zou gebruiken Met deze techniek, Gaze and Pinch genaamd, voerden onderzoekers in 2022 experimenten uit met het idee. Ze vergeleken het met een systeem waarbij een gebruiker eerst naar een object wijst, met behulp van wat ze een handray noemden, voordat hij knijpt om het te activeren.
In een Twitter-thread over de bevindingen vat professor Ken Pfeuffer van de Universiteit van Aarhus de resultaten samen.
Volgens professor Pfeuffer is”gaze+pinch sneller en minder fysieke inspanning als doelen passen bij de nauwkeurigheid van de eye-tracker.”Met andere woorden, als een headset precies weet waar een gebruiker naar kijkt, is deze blik en knijpbeweging de beste methode om hem te gebruiken.
Misschien weten we het pas echt als de Vision Pro in de uitverkoop is, maar de eerste recensenten beweren dat het volgen van de blikken goed is. En Apple heeft er een hele reeks patenten op, waaronder een uit 2019.
Gaze and Pinch is over het algemeen echter alleen maar beter, omdat er in ieder geval één geval is waarin het kan worden verslagen door de Handray-optie. Concreet zegt de samenvatting van professor Pfeuffer van het werk van hem en zijn collega’s:
Snelheid: blik+knijpen (2,5 sec) > handstraal (4,6 sec) Fout: handstraal (1%) > blik+knijpen (3%) Voorkeur: Gaze+Pinch (6/16) > Handray (0/16)
Dus in een test van de tijd die nodig is om een object te kiezen en te selecteren, is de blik-en knijpbenadering die Apple gebruikt aanzienlijk sneller. Maar om het goed te doen, om te selecteren wat gewenst is, wint de eenvoudigere Handray-optie.
Alleen, in wat vermoedelijk een enquête is onder de mensen die bij het testen betrokken waren, gaf niemand de voorkeur aan de handray-aanpak. En ongeveer 6 van de 16 ondervraagden gaven actief de voorkeur aan staren en knijpen.
Het onderzoek waarnaar rechtstreeks wordt verwezen in de Twitter-thread is een onderzoekspaper genaamd”A Fitts’Law Study of Gaze-Hand Alignment for Selection in 3D User Interfaces.”Een samenvatting kan hier worden gelezen.
Ergens in de discussie heeft professor Pfeuffer ook gelinkt aan een paper genaamd”PalmGazer: Unimanual Eye-hand Menus in Augmented Reality.”Dat volledige artikel is beschikbaar om online te lezen.
De verzenddatum van Apple Vision Pro is nog enkele maanden verwijderd, en het bedrijf is het voortdurend aan het ontwikkelen. Maar het is onwaarschijnlijk dat zoiets fundamenteels verandert als de manier waarop een gebruiker de technologie kan gebruiken, vooral als redelijkerwijs kan worden aangenomen dat Apple vergelijkbaar onderzoek heeft gedaan in de jaren dat het aan het apparaat heeft gewerkt.