Apple เปิดตัวชุดหูฟังความเป็นจริงผสม Apple Vision Pro ที่หลายคนรอคอยระหว่างการปราศรัยสำคัญ WWDC 2023 ในวันจันทร์ หากคุณดูการนำเสนอ คุณอาจสังเกตเห็นว่าอุปกรณ์ “การประมวลผลเชิงพื้นที่” ใหม่ของ Apple ไม่ได้ใช้แป้นพิมพ์ เมาส์ หรือจอยสติ๊กเพื่อป้อนข้อมูลและควบคุมคุณสมบัติของอุปกรณ์
ระหว่าง เซสชันล่าสุดสำหรับนักพัฒนาซอฟต์แวร์ Apple ได้สาธิตท่าทางสัมผัสในตัวที่ ใช้เพื่อโต้ตอบกับ Vision Pro:
แตะ – เมื่อคุณแตะนิ้วหัวแม่มือและนิ้วชี้พร้อมกัน แสดงว่าคุณส่งสัญญาณไปยังชุดหูฟังว่าคุณต้องการแตะองค์ประกอบในพื้นที่เสมือนที่คุณอยู่ ดูบนจอแสดงผลชุดหูฟัง ผู้ใช้บางคนเริ่มเรียกสิ่งนี้ว่าเหน็บแนม Apple อธิบายว่านี่เป็นเสมือนการเทียบเท่าเมื่อคุณแตะหน้าจอ iPhone ของคุณแตะสองครั้ง – การแตะสองครั้งด้วยนิ้วจะเป็นการแตะสองครั้ง (ดูเหมือนมีเหตุผล)บีบและกดค้างไว้ – ท่าทางการบีบและกดค้างไว้ช่วยให้คุณทำงานต่างๆ เช่น การเน้นข้อความบนหน้าจอได้ บีบและลาก – โดยการบีบและลากคุณ จะสามารถเลื่อนและเคลื่อนที่ไปรอบๆ หน้าต่างได้ทั้งในแนวนอนและแนวตั้ง ยิ่งคุณเลื่อนมือเร็วเท่าไร คุณก็จะเลื่อนเร็วขึ้นเท่านั้นซูม – ซูมเป็นท่าทางที่ใช้มือทั้งสองข้าง ซึ่งเป็นหนึ่งใน สองท่าทางที่ต้องใช้สิ่งนี้ การบีบนิ้วเข้าหากันและดึงมือออกจากกัน จะเป็นการซูมเข้าที่องค์ประกอบ ลากหน้าต่างที่มุมเพื่อปรับขนาดหน้าต่างหมุน – หมุนเป็นรูปแบบการใช้สองมืออีกแบบหนึ่ง เพียงบีบนิ้วเข้าด้วยกันแล้วหมุนมือ สิ่งนี้ทำให้คุณสามารถจัดการกับวัตถุในพื้นที่เสมือนจริงที่เห็นบนหน้าจอของชุดหูฟัง
เนื่องจากมีกล้องหลายตัวใน Vision Pro จึงสามารถติดตามการเคลื่อนไหวของดวงตา ตรวจจับตำแหน่งที่คุณกำลังมองหาได้อย่างแม่นยำ ตำแหน่งสายตาของคุณช่วยในการกำหนดเป้าหมายองค์ประกอบที่คุณต้องการโต้ตอบด้วยท่าทางมือ
“แจ๊สแฮนด์” คือ ไม่จำเป็นต้องใช้กับ Vision Pro เนื่องจากท่าทางของมือสามารถคงไว้ซึ่งความละเอียดอ่อนแทนการทำท่าทางที่ยิ่งใหญ่ Apple ยังบอกผู้ใช้ว่าสามารถวางมือไว้บนตักได้ เพราะจะช่วยป้องกันไม่ให้แขนของพวกเขาเมื่อยล้าเมื่อถูกยกขึ้นข้างหน้า ท่าทางอื่น ๆ นั้นเล็กน้อยในทำนองเดียวกัน ตัวอย่างเช่น การบีบนิ้วเพียงเล็กน้อยก็เหมือนกับการแตะ ทั้งหมดนี้เกิดจากความสามารถในการติดตามที่แม่นยำของกล้อง
วัตถุที่อยู่ใกล้และไกลสามารถเลือกและจัดการได้อย่างง่ายดายเพียงแค่ยื่นมือออกและใช้ปลายนิ้วของคุณเพื่อโต้ตอบกับวัตถุเสมือน
Apple กล่าวว่าชุดหูฟังยังรองรับการเคลื่อนไหวของมืออื่นๆ รวมถึงการพิมพ์ด้วยอากาศ โชคไม่ดีที่ผู้โชคดีไม่กี่คนที่มีโอกาสใช้เวลากับหน่วยบอกว่าพวกเขาไม่สามารถลองใช้คุณสมบัตินี้ได้
ท่าทางสัมผัสยังสามารถ”ซ้อน”หรือใช้ร่วมกันได้ ในการสร้างภาพวาด เพียงมองไปที่จุดบนผืนผ้าใบเสมือนจริง เลือกพู่กันด้วยมือของคุณ จากนั้นวาดในอากาศโดยใช้ท่าทางอื่น
นักพัฒนาซอฟต์แวร์จะสามารถสร้างท่าทางสัมผัสที่กำหนดเองเพื่อใช้ในแอปของตนได้ นักพัฒนาจะต้องตรวจสอบให้แน่ใจว่าท่าทางของพวกเขาแตกต่างจากท่าทางเริ่มต้นของระบบหรือจากท่าทางมือทั่วไปที่ผู้คนอาจใช้ ท่าทางควรจะสามารถทำซ้ำได้โดยไม่เมื่อยมือ
Vision Pro ยังสามารถใช้งานร่วมกับแทร็คแพดบลูทูธและเมาส์ คีย์บอร์ด และตัวควบคุมเกมได้อีกด้วย การเขียนตามคำบอกและเครื่องมือค้นหาด้วยเสียงก็เป็นส่วนหนึ่งของระบบเช่นกัน