Google on tehnyt hienoja asioita tekoälyn kanssa, mutta yksi tekniikan tyylikkäimmistä sovelluksista on äskettäin julkaistu Project Gameface, hands-free tekoälyllä toimiva pelihiiri, jonka yritys julkisti Google I/O:ssa. 2023.
Web-kameran avulla Project Gamefacen avulla voi pelata PC-pelejä, jotka normaalisti vaatisivat AI-tekniikan ansiosta hiiren liikkumiseen. Se toimii käyttämällä verkkokameraa kasvojen skannaamiseen ja pään liikkeiden ja kasvojen eleiden etsimiseen. Nämä liikkeet ja eleet muuttuvat sitten hahmon liikkeiksi pelin sisällä.
Säätimet ovat myös melko vankat ja intuitiiviset. Gameface-ohjelmiston avulla voit määrittää näppäin-ja hiirisidokset melkein kaikkeen. Esimerkiksi suun avaaminen voidaan asettaa hiiren vasemmalla napsautuksella. Vaikka on olemassa myös kaikenlaisia muita liike-tai elevaihtoehtoja. Mukaan lukien hymyileminen, vasemmalle katsominen tai vasemman kulmakarvojen kohottaminen. Voit jopa määrittää, kuinka näkyviä näiden liikkeiden tai eleiden tulee olla syötteen välittämiseksi. Tämän pitäisi auttaa ohjelmistoa mukautumaan paremmin eri käyttäjien tarpeisiin.
Project Gameface käyttää Googlen avoimen lähdekoodin MediaPipe-ratkaisua, joka yhdistää erilaisia tekoälymalleja tuottaakseen sinulle tuloksen. Tulos on”kasvosi 468 pisteen verkko, joka muunnetaan sitten telemetriaksi, kuten hiiren liikkeeksi tai napsahduksiksi”, Googlen johtava tekoälysuoja Laurence Moroney sanoo.
Moroney sanoo, että se toimii natiivina laitteissa ja”Yksi tekniikan hämmästyttävimmistä asioista on se, että se tarvitsee vain verkkokameran syötteen.”
Project Gameface on suunniteltu yhdessä pelin streamer Lance Carrin kanssa
Saatat ihmetellä, kuka Lance Carr on. No, esittelemme sinut. Lance Carr on pelin streamaaja, joka kärsii lihasdystrofiasta. Jos olet ollenkaan perehtynyt sairauteen, tiedät, että se heikentää lihaksia ja voi tehdä melkein kaiken tekemisestä haastavampaa. Mukaan lukien pelaaminen. Tässä Google tulee esiin. Lancen talo paloi vuonna 2021, kun hän pelasi streamissa Diablo II:ta. Kaikkien hänen kalliiden laitteidensa, mukaan lukien mukautuva päänseurantahiiri, jonka avulla hän pystyi pelaamaan pelejä, mukana.
Google sai kiinni tarinan tuulesta ja otti yhteyttä Lanceen. Googlen ja Lancen välinen yhteistyö Project Gamefacen suunnittelussa alkoi pian. Lancen toiveena on, että tämä tekniikka voidaan antaa kaikille, jotka voisivat käyttää sitä elämänsä helpottamiseksi.
Google on tehnyt tekniikan koodista myös avoimen lähdekoodin, ja se on saatavilla jopa esikatselu tältä päivältä niille, jotka haluavat tutustua siihen Googlen GitHub-tietovarastosta.
