Google ha fatto cose piuttosto interessanti con l’intelligenza artificiale, ma una delle applicazioni più interessanti della tecnologia deve essere il nuovo Project Gameface, un mouse da gioco con intelligenza artificiale a mani libere che la società ha annunciato al Google I/O 2023.
Con l’aiuto di una webcam, è possibile utilizzare Project Gameface per giocare a giochi per PC che normalmente richiederebbero un mouse per il movimento, grazie alla tecnologia AI. Funziona utilizzando la webcam per scansionare il viso e cercare movimenti della testa e gesti facciali. Quei movimenti e gesti si traducono quindi in movimenti di gioco del proprio personaggio.
Anche i controlli sono piuttosto robusti e intuitivi. Il software Gameface ti consente di impostare associazioni di tasti e mouse praticamente per tutto. L’apertura della bocca, ad esempio, potrebbe essere impostata sul clic sinistro del mouse. Sebbene ci siano anche tutti i tipi di altre opzioni di movimento o gesto. Compreso sorridere, guardare a sinistra o alzare il sopracciglio sinistro. Puoi persino impostare l’importanza di quei movimenti o gesti per trasmettere l’input. Il che dovrebbe aiutare il software ad essere più adattabile alle esigenze dei diversi utenti.
Project Gameface utilizza la soluzione MediaPipe open source di Google, che collega diversi modelli di intelligenza artificiale per darti un risultato. L’output è”una mesh di 468 punti sul tuo viso che vengono poi convertiti in telemetria come il movimento o i clic del mouse”, afferma Laurence Moroney, Lead AI Advocate di Google.
Moroney afferma che funziona in modo nativo sui dispositivi e”una delle cose più sorprendenti della tecnologia è che richiede solo un input da una webcam.”
Project Gameface è co-progettato con lo streamer di giochi Lance Carr
Potresti chiederti chi Lance Carr lo è. Bene, ti presentiamo. Lance Carr è uno streamer di giochi che vive con la distrofia muscolare. Se hai familiarità con la malattia, allora sai che indebolisce i tuoi muscoli e può rendere più difficile fare quasi tutto. Compreso il gioco. È qui che entra in gioco Google. La casa di Lance è andata a fuoco nel 2021 mentre era in streaming a giocare a Diablo II. Insieme a tutta la sua costosa attrezzatura, incluso il mouse adattivo con rilevamento della testa che gli ha permesso di giocare.
Google ha saputo della storia e ha contattato Lance. Presto iniziarono i lavori tra Google e Lance per co-progettare Project Gameface. La speranza di Lance è che questa tecnologia possa essere data a tutti coloro che potrebbero utilizzarla per semplificarsi la vita.
Google ha reso open-source anche il codice per la tecnologia ed è persino disponibile in un’anteprima da oggi per coloro che vogliono dare un’occhiata al repository GitHub di Google.
