A Google elég klassz dolgokat csinált az AI-val, de a technológia egyik legmenőbb alkalmazása az újonnan bemutatott Project Gameface, egy kihangosított mesterséges intelligencia-alapú játékegér, amelyet a vállalat a Google I/O-n jelentett be. 2023.
Egy webkamera segítségével a Project Gameface segítségével olyan PC-s játékokat játszhat, amelyek mozgatásához az AI-technológiának köszönhetően általában egérre van szükség. Úgy működik, hogy a webkamera segítségével átvizsgálja az arcot, és keresi a fejmozgásokat és az arcmozdulatokat. Ezek a mozdulatok és gesztusok aztán a karakter játékon belüli mozdulataivá válnak.
A kezelőszervek is meglehetősen robusztusak és intuitívak. A Gameface szoftverrel szinte mindenhez beállíthatsz billentyű-és egérkötéseket. Például a száj kinyitása beállítható az egér bal gombjával. Pedig van mindenféle más mozgási vagy gesztuslehetőség is. Beleértve a mosolygást, a balra nézést vagy a bal szemöldök felhúzását. Még azt is beállíthatja, hogy ezeknek a mozdulatoknak vagy gesztusoknak mennyire szembetűnőnek kell lenniük a bemenet továbbításához. Ami segít a szoftvernek abban, hogy jobban alkalmazkodjon a különböző felhasználók igényeihez.
A Project Gameface a Google nyílt forráskódú MediaPipe megoldását használja, amely összekapcsolja a különböző mesterséges intelligencia modelleket, hogy eredményt adjon. A kimenet „az arcán lévő 468 pontból álló háló, amelyet aztán telemetriává alakítanak át, például az egér mozgását vagy kattanását” – mondja Laurence Moroney, a Google vezető mesterséges intelligencia-tanácsadója.
Moroney kijelenti, hogy natív módon fut az eszközökön, és „ az egyik legcsodálatosabb dolog a technológiában, hogy csak egy webkamera bemenetére van szükség.”
A Project Gameface a játékstreamelő Lance Carrral közösen készült
Fontos lehet, hogy ki Lance Carr az. Nos, hadd mutassuk be. Lance Carr egy játék streamer, aki izomdystrophiával él. Ha egyáltalán ismeri a betegséget, akkor tudja, hogy gyengíti az izmait, és szinte mindent megnehezíthet. Beleértve a játékot. Itt lép be a Google. Lance háza még 2021-ben leégett, miközben a Diablo II-t játszották. Minden drága felszerelésével együtt, beleértve az adaptív fejkövető egeret, amely lehetővé tette számára, hogy játsszon.
A Google elkapta a sztorit, és megkereste Lance-t. Hamarosan megkezdődött a munka a Google és Lance között a Project Gameface közös tervezésén. Lance abban reménykedik, hogy ezt a technológiát mindenki megkaphatja, aki élete megkönnyítésére használhatja.
A Google a technológia kódját nyílt forráskódúvá is tette, és még a előzetes mától azoknak, akik szeretnék megnézni a Google GitHub-tárhelyén.
