Google ha estado haciendo algunas cosas geniales con la IA, pero una de las aplicaciones más geniales de la tecnología tiene que ser el recientemente presentado Project Gameface, un mouse para juegos manos libres alimentado por IA que la compañía anunció en Google I/O. 2023.
Con la ayuda de una cámara web, uno podría usar Project Gameface para jugar juegos de PC que normalmente requerirían un mouse para moverse, gracias a la tecnología AI. Funciona utilizando la cámara web para escanear la cara y buscar movimientos de cabeza y gestos faciales. Esos movimientos y gestos luego se traducen en movimientos del personaje dentro del juego.
Los controles también son bastante robustos e intuitivos. El software Gameface le permite configurar enlaces de teclas y mouse para casi todo. Abrir la boca, por ejemplo, podría configurarse con el clic izquierdo del mouse. Aunque también hay todo tipo de otras opciones de movimiento o gestos. Incluyendo sonreír, mirar a la izquierda o levantar la ceja izquierda. Incluso puede establecer qué tan prominentes deberían ser esos movimientos o gestos para transmitir la entrada. Lo que debería ayudar a que el software sea más adaptable a las necesidades de diferentes usuarios.
Project Gameface utiliza la solución MediaPipe de código abierto de Google, que vincula diferentes modelos de IA para brindarle un resultado. El resultado es”una malla de 468 puntos en su cara que luego se convierten en telemetría, como el movimiento del mouse o los clics”, dice Laurence Moroney, defensor principal de inteligencia artificial de Google.
Moroney afirma que se ejecuta de forma nativa en dispositivos y”una de las cosas más sorprendentes de la tecnología es que solo necesita una entrada de una cámara web”.
Project Gameface está codiseñado con el streamer de juegos Lance Carr
Quizás te preguntes quién Lance Carr lo es. Bueno, déjanos presentarte. Lance Carr es un streamer de juegos que vive con distrofia muscular. Si está familiarizado con la enfermedad, entonces sabe que debilita los músculos y puede hacer que sea más difícil hacer casi todo. Incluyendo juegos. Aquí es donde entra en juego Google. La casa de Lance se incendió en 2021 mientras jugaba Diablo II. Junto con todo su costoso equipo, incluido el mouse adaptativo de seguimiento de la cabeza que le permitía jugar.
Google se enteró de la historia y se acercó a Lance. Pronto comenzó el trabajo entre Google y Lance para codiseñar Project Gameface. La esperanza de Lance es que esta tecnología se pueda brindar a todos los que puedan usarla para hacer sus vidas más fáciles.
Google también ha hecho que el código de la tecnología sea de código abierto, e incluso está disponible en una vista previa de hoy para aquellos que quieran comprobarlo en el repositorio GitHub de Google.