Google ได้ทำสิ่งที่ยอดเยี่ยมกับ AI แต่หนึ่งในแอปพลิเคชันที่ยอดเยี่ยมที่สุดของเทคโนโลยีนี้ต้องเป็น Project Gameface ที่เพิ่งเปิดตัว ซึ่งเป็นเมาส์สำหรับเล่นเกมแบบแฮนด์ฟรีที่ขับเคลื่อนด้วย AI ซึ่งบริษัทประกาศในงาน Google I/O 2023
ด้วยความช่วยเหลือของเว็บแคม เราสามารถใช้ Project Gameface เพื่อเล่นเกมพีซีที่ปกติแล้วต้องใช้เมาส์ในการเคลื่อนไหว ด้วยเทคโนโลยี AI ทำงานโดยใช้เว็บแคมเพื่อสแกนใบหน้าและมองหาการเคลื่อนไหวของศีรษะและการแสดงท่าทางบนใบหน้า การเคลื่อนไหวและท่าทางเหล่านั้นจะแปลเป็นการเคลื่อนไหวของตัวละครในเกม
การควบคุมค่อนข้างแข็งแกร่งและใช้งานง่ายด้วย ซอฟต์แวร์ Gameface ช่วยให้คุณตั้งค่าการผูกคีย์และเมาส์ได้เกือบทุกอย่าง ตัวอย่างเช่น การเปิดปากของคุณอาจตั้งค่าเป็นการคลิกซ้ายของเมาส์ แม้ว่าจะมีตัวเลือกการเคลื่อนไหวหรือท่าทางอื่นๆ ทุกประเภทเช่นกัน รวมถึงการยิ้ม มองซ้าย หรือยกคิ้วซ้ายขึ้น คุณยังสามารถตั้งค่าว่าการเคลื่อนไหวหรือท่าทางเหล่านั้นจะต้องโดดเด่นเพียงใดในการถ่ายทอดอินพุต ซึ่งจะช่วยให้ซอฟต์แวร์สามารถปรับให้เข้ากับความต้องการของผู้ใช้ที่แตกต่างกันได้มากขึ้น
Project Gameface ใช้โซลูชัน MediaPipe แบบโอเพ่นซอร์สของ Google ซึ่งเชื่อมโยงโมเดล AI ต่างๆ เข้าด้วยกันเพื่อให้คุณได้ผลลัพธ์ ผลลัพธ์ที่ได้คือ “ตาข่าย 468 จุดบนใบหน้าของคุณที่แปลงเป็นการวัดระยะไกล เช่น การเคลื่อนไหวของเมาส์หรือการคลิก” Laurence Moroney หัวหน้าฝ่ายสนับสนุนด้าน AI ของ Google กล่าว
Moroney ระบุว่าการทำงานโดยกำเนิดบนอุปกรณ์ต่างๆ และ “ สิ่งที่น่าทึ่งที่สุดอย่างหนึ่งเกี่ยวกับเทคโนโลยีนี้ก็คือต้องการข้อมูลจากเว็บแคมเท่านั้น”
Project Gameface ออกแบบร่วมกับสตรีมเมอร์เกม Lance Carr
คุณอาจสงสัยว่าใคร แลนซ์ คาร์ คือ ให้เราแนะนำคุณ Lance Carr เป็นสตรีมเมอร์เกมที่มีโรคกล้ามเนื้อเสื่อม หากคุณคุ้นเคยกับโรคนี้เป็นอย่างดี คุณจะรู้ว่ามันทำให้กล้ามเนื้อของคุณอ่อนแอลงและทำให้ยากขึ้นในการทำเกือบทุกอย่าง รวมถึงการเล่นเกม นี่คือที่มาของ Google บ้านของ Lance ถูกไฟไหม้ในปี 2021 ขณะที่สตรีมเล่น Diablo II พร้อมด้วยอุปกรณ์ราคาแพงทั้งหมด รวมถึงเมาส์ติดตามศีรษะแบบปรับได้ที่ทำให้เขาเล่นเกมได้
Google เข้าใจเรื่องราวและติดต่อ Lance ในไม่ช้างานระหว่าง Google และ Lance ก็เริ่มต้นขึ้นเพื่อร่วมออกแบบ Project Gameface ความหวังของ Lance คือเทคโนโลยีนี้สามารถมอบให้กับทุกคนที่สามารถใช้เพื่อทำให้ชีวิตของพวกเขาง่ายขึ้น
Google ได้สร้างโค้ดสำหรับเทคโนโลยีโอเพนซอร์สเช่นกัน และมันยังพร้อมใช้งานใน ดูตัวอย่างตั้งแต่วันนี้สำหรับผู้ที่ต้องการลองดูที่ที่เก็บ GitHub ของ Google