Google telah melakukan beberapa hal yang cukup keren dengan AI, tetapi salah satu aplikasi paling keren dari teknologi tersebut adalah Project Gameface yang baru diungkap, mouse gaming bertenaga AI hands-free yang diumumkan perusahaan di Google I/O 2023.
Dengan bantuan webcam, seseorang dapat menggunakan Project Gameface untuk memainkan game PC yang biasanya membutuhkan mouse untuk bergerak, berkat teknologi AI. Ia bekerja dengan memanfaatkan webcam untuk memindai wajah dan mencari gerakan kepala dan gestur wajah. Gerakan dan gestur tersebut kemudian diterjemahkan menjadi gerakan dalam game dari karakter seseorang.
Kontrolnya juga cukup kuat dan intuitif. Perangkat lunak Gameface memungkinkan Anda mengatur pengikatan tombol dan mouse untuk hampir semua hal. Membuka mulut Anda misalnya dapat diatur ke klik kiri mouse. Padahal ada berbagai macam pilihan gerakan atau isyarat lainnya juga. Termasuk tersenyum, melihat ke kiri, atau mengangkat alis kiri. Anda bahkan dapat menyetel seberapa penting gerakan atau gestur tersebut untuk menyampaikan input. Yang seharusnya membantu perangkat lunak lebih mudah beradaptasi dengan kebutuhan pengguna yang berbeda.
Project Gameface menggunakan solusi MediaPipe sumber terbuka Google, yang menghubungkan berbagai model AI untuk memberi Anda keluaran. Outputnya adalah “jaring 468 titik di wajah Anda yang kemudian diubah menjadi telemetri seperti gerakan mouse atau klik,” kata Advokat AI Utama Google Laurence Moroney.
Moroney menyatakan bahwa ini berjalan secara native di perangkat dan “ salah satu hal yang paling menakjubkan tentang teknologi ini adalah hanya membutuhkan input dari webcam.”
Project Gameface dirancang bersama dengan streamer game Lance Carr
Anda mungkin bertanya-tanya siapa Lance Carr adalah. Baiklah, izinkan kami memperkenalkan Anda. Lance Carr adalah streamer game yang hidup dengan distrofi otot. Jika Anda sudah familiar dengan penyakit ini, maka Anda tahu itu melemahkan otot Anda dan membuatnya lebih sulit untuk melakukan hampir semua hal. Termasuk bermain game. Di sinilah Google berperan. Rumah Lance terbakar pada tahun 2021 saat streaming memainkan Diablo II. Bersama dengan semua perlengkapannya yang mahal, termasuk mouse pelacak kepala adaptif yang memungkinkannya bermain game.
Google mengetahui ceritanya dan menghubungi Lance. Pekerjaan segera dimulai antara Google dan Lance untuk merancang bersama Project Gameface. Harapan Lance adalah bahwa teknologi ini dapat diberikan kepada semua orang yang dapat menggunakannya untuk membuat hidup mereka lebih mudah.
Google juga telah membuat kode untuk teknologi ini sebagai sumber terbuka, dan bahkan tersedia di pratinjau mulai hari ini bagi mereka yang ingin memeriksanya di repositori GitHub Google.