Apple Vision Pro käytti paljon neurotieteitä kehittääkseen joitakin sen avainominaisuuksia entisen Applen insinöörin mukaan, ja se luottaa erilaisiin temppuihin määrittääkseen, mitä henkilö aikoo tehdä käyttöliittymässä.
Applen Vision Pro-kuulokkeiden pääkäyttöliittymä perustuu navigointiin katseenseurannan ja eleiden avulla, jolloin järjestelmän on mahdollisimman nopeasti määritettävä, mitä käyttäjä tarkastelee. Maanantaina Twitterissä julkaistussa viestissä esirippu vedetään paljastamaan joitain projektiin kuuluneista varhaisista ajatuksista.
Sterling Crispin työskenteli neuroteknologian prototyyppien tutkijana Applen Technology Development Groupissa yli kolme vuotta, pisin, jonka hän on koskaan työskennellyt yksittäisen työn parissa. Siellä ollessaan hän työskenteli elementtien parissa, jotka tukivat kuulokkeiden perustavaa kehitystä, mukaan lukien”mindfulness-kokemukset”ja muut”kunnianhimoiset moonshot-tutkimukset neuroteknologialla”.
Esimerkiksi Crispin vertasi sitä”ajatusten lukemiseen”, kuten ennustaa, mitä käyttäjä klikkaa ennen kuin klikkaa.
Ylpeänä osallistumisestaan kuulokkeiden alkuperäiseen näkemykseen, Crispin kuului pieneen tiimiin, joka”auttoi tuomaan vihreää valoa tälle tärkeälle tuotekategorialle”, jolla hänen mielestään voisi”on jonain päivänä olla merkittävä globaali vaikutus”.”
Vaikka suurin osa hänen työstään on edelleen NDA:n alaisena, Crispin voisi silti keskustella yksityiskohdista, jotka on julkistettu patenteissa.
Psyykkiset tilat
Crispinin työhön sisältyi käyttäjien mielentilan havaitseminen tietojen perusteella, jotka kerättiin”heidän kehostaan ja aivoistaan, kun he kokivat mukaansatempaavia kokemuksia”.
Tekoälymallit voivat yrittää ennustaa käyttäjän ajatuksia käyttämällä silmänseurantaa, sähköistä aktiivisuutta, sydämenlyöntejä, lihastoimintaa, verenpainetta, ihon johtavuutta ja muita mittareita.”Tekoälymallit yrittävät ennustaa, oletko utelias, vaeltelet mielessäsi, pelkäätkö, kiinnitätkö huomiota, muistatko menneen kokemuksen vai jotain muuta kognitiivista tilaa”, kirjoittaa Crispin.
Yksi”hienoimmat tulokset”pystyivät ennustamaan, milloin käyttäjä aikoo napsauttaa jotain ennen kuin hän klikkaa sitä.
“Oppilassi reagoi osittain ennen kuin napsautat, koska odotat jotain tapahtuvan napsautuksen jälkeen”, Crispin selittää.”Joten voit luoda biopalautteen käyttäjän aivoilla seuraamalla heidän silmiensä käyttäytymistä ja suunnittelemalla käyttöliittymää reaaliajassa luodaksesi enemmän tätä ennakoivaa oppilaan vastetta.”
Hän vertaa sitä”raaka-aivojen tietokoneliitäntään silmien kautta”, että hän ottaisi hoitaakseen”invasiivisen aivoleikkauksen minä päivänä tahansa”.
Käyttäjään vaikuttaminen
Toisessa tilan määrittämistä koskevassa tempussa käyttäjille voidaan näyttää kuvia tai toistaa ääniä tavoilla, joita he eivät havaitse, ja sitten mitata reaktio tuohon ärsykkeeseen.
Yksi muu patentti selitti, kuinka koneoppimista ja kehon signaaleja voidaan käyttää ennustamaan käyttäjän keskittymiskykyä, jos hän on rentoutunut, tai määrittää kuinka hyvin hän oppii. Käyttämällä tätä tietoa ja tilaa järjestelmä voisi mukauttaa virtuaaliympäristön parantamaan vaadittua tilaa.
Crispin lisää, että on olemassa”tonnia muuta tavaraa Olin mukana”, joka ei ole noussut esiin patenteissa, ja toivon, että lisää ilmaantuu tiellä.
Vaikka yleisesti ottaen ollaan tyytyväinen Vision Pron vaikutuksiin, on silti olemassa varoitus, että se on”vielä yksi askel eteenpäin tiellä kohti VR:tä”ja että teollisuudelta voi kulua vielä vuosikymmen. täysin kiinni.
