Apps auf Vision Pro
Schon bevor Apple Vision Pro angekündigt wurde, hatten Forscher die Wirksamkeit der von Apple gewählten Bedienelemente für das Headset untersucht.
Wie erstmals auf der WWDC vorgestellt, wählt Vision Pro automatisch aus, was ein Benutzer auf seinem Display sieht. Und dann erkennen die umgebenden Kameras, wenn der Benutzer eine Kneifbewegung ausführt, um effektiv auf das Objekt zu tippen oder zu klicken.
Mit der Aussage, dass „wir keine Ahnung hatten“, dass Apple diese Technik namens „Gaze and Pinch“ verwenden würde, führten die Forscher im Jahr 2022 Experimente mit der Idee durch. Insbesondere verglichen sie sie mit einem System, auf das ein Benutzer zuerst zeigt ein Objekt mithilfe eines sogenannten Handstrahls, bevor es durch Kneifen aktiviert wird.
In einem Twitter-Thread zu den Ergebnissen fasste Professor Ken Pfeuffer von der Universität Aarhus die Ergebnisse zusammen.
Laut Professor Pfeuffer ist „Blick + Kneifen schneller und erfordert weniger körperliche Anstrengung, wenn die Ziele mit der Genauigkeit des Eyetrackers übereinstimmen.“ Mit anderen Worten: Wenn ein Headset genau erkennt, wohin ein Benutzer schaut, ist dieser Blick und die Berührung die beste Verwendungsmethode.
Vielleicht werden wir es erst dann genau wissen, wenn der Vision Pro im Angebot ist, aber erste Rezensenten behaupten, dass die Blickverfolgung gut sei. Und Apple hat eine ganze Reihe von Patenten dazu, darunter auch eines aus dem Jahr 2019.
Gaze and Pinch ist jedoch insgesamt nur besser, da es mindestens einen Fall gibt, in dem es von der Handray-Option geschlagen werden kann. Konkret heißt es in der Zusammenfassung von Professor Pfeuffer über die Arbeit von ihm und seinen Kollegen:
Geschwindigkeit: Gaze+Pinch (2,5 s) > Handray (4,6 s) Fehler: Handray (1 %) > Gaze+Pinch (3 %) Präferenz: Gaze+Pinch (6/16) > Handray (0/16)
Bei einem Test der Zeit, die benötigt wird, um ein Objekt auszuwählen und auszuwählen, ist der Blick-und Pinch-Ansatz, den Apple verwendet, deutlich schneller. Aber wenn es darum geht, alles richtig zu machen und auszuwählen, was gewünscht wird, gewinnt die einfachere Handray-Option.
Nur in einer Umfrage unter den an den Tests beteiligten Personen bevorzugte niemand den Handray-Ansatz. Und etwa 6 der 16 Befragten bevorzugten aktiv das Anstarren und Kneifen.
Bei der Forschung, auf die im Twitter-Thread direkt verwiesen wird, handelt es sich um eine Forschungsarbeit mit dem Titel „A Fitts’Law Study of Gaze-Hand Alignment for Selection in 3D User Interfaces“. Eine Zusammenfassung kann hier gelesen werden.
An anderer Stelle in der Diskussion hat Professor Pfeuffer auch auf einen Artikel mit dem Titel „PalmGazer: Unimanual Eye-hand Menus in Augmented Reality“ verlinkt. Dieses vollständige Papier kann online gelesen werden.
Der Liefertermin für Apple Vision Pro ist noch einige Monate entfernt und das Unternehmen entwickelt es kontinuierlich weiter. Es ist jedoch unwahrscheinlich, dass sich etwas so Grundlegendes wie die Art und Weise ändert, wie ein Benutzer die Technologie nutzen kann, insbesondere wenn man davon ausgehen kann, dass Apple in den Jahren, in denen es an dem Gerät gearbeitet hat, ähnliche Untersuchungen durchgeführt hat.
