การวิจัยของ Apple Vision Pro และงานในยุคแรกๆ

ทำไมเราไม่เห็นสิ่งที่อยู่ตรงหน้า

ตั้งแต่สิทธิบัตรสำหรับ’สมาร์ทริง’ไปจนถึงสิทธิบัตรสำหรับฉายเดสก์ท็อปของ Mac ออกไปบนผนัง Apple ได้ซ่อน Apple Vision มือโปรที่เห็นชัดมานานหลายปี

ในช่วงทศวรรษที่ผ่านมา ต้องมีการจดสิทธิบัตรและคำขอรับสิทธิบัตรของ Apple หลายร้อยรายการที่เกี่ยวข้องกับชุดหูฟังในทันทีและเถียงไม่ได้ พวกเขายังมีคำว่า”ชุดหูฟัง”

แต่ยังมีสิทธิบัตรอื่นๆ อีกมากมายที่ ไม่ได้พูดว่า”ชุดหูฟัง”แต่ตอนนี้เรารู้แล้วว่านั่นคือสิ่งที่พวกเขาต้องการจริงๆ

เช่น เมื่อปี 2015 เมื่อ 8 ปีที่แล้ว ซึ่งปรากฏว่า Apple ต้องการสร้างแป้นพิมพ์ Mac ขึ้นมาจากอากาศ กล้องหรือเซ็นเซอร์บางชนิดจะอยู่บนหน้าจอของ Mac และผู้ใช้สามารถใช้ท่าทางการพิมพ์ที่ด้านหน้าได้

ข้อมูลจากกล้องจะให้”การคาดเดาที่ดีที่สุดจากข้อมูลที่ผู้ใช้ตั้งใจไว้”เอกสารต้นฉบับอ่าน ซึ่งดูเหมือนว่าจะช่วยให้ผู้ใช้ Mac พิมพ์ได้เร็วขึ้น

ส่งต่อไปยัง Vision Pro และมาพร้อมกับแป้นพิมพ์เสมือนประเภทนั้นทุกประการ แทนที่จะหันกล้องจาก Mac เข้าหาผู้ใช้ แต่จะใช้กล้องที่มองจากผู้มุ่งหวังของผู้สวมใส่ Vision Pro ออกไปทางนิ้วมือ

เราคิดว่า นี่เป็นเรื่องเกี่ยวกับ MacBook Pro ในอนาคต แต่สิ่งสำคัญคือท่าทางที่รองรับ Vision Pro

หรือในปี 2020 ดูเหมือนว่า iMac ในอนาคตบางรุ่นจะสามารถแสดงหน้าจอที่ผนังด้านหลังเครื่องได้ สมมติว่าคุณมีผนังเรียบๆ หรือมี Splashback ที่ดี เดสก์ท็อปอาจดูเหมือนขยายเกินขอบเขตของหน้าจอ Mac

นั่นอาจเกี่ยวข้องกับโปรเจ็กเตอร์ที่ติดตั้งใน iMac แต่ก็ต้องอาศัยอุปกรณ์ที่อนุญาตให้แสดงหน้าจอได้กว้างกว่าบน Mac จริง ตอนนี้ Vision Pro ให้คุณนำหน้าจอ Mac ของคุณมาปรับขนาด จัดตำแหน่งใหม่ได้ด้วยวิธีเดียวกัน

การจัดการเดสก์ท็อปที่มีจำนวนมาก กว้างกว่าหน้าจอจริงย่อมเชื่อมโยงกับวิธีที่ Vision Pro สามารถแสดงหน้าจอ Mac ได้ทุกขนาดหรือทุกตำแหน่ง

ท่าทางในอากาศเบาบาง

หนึ่งในที่สุด คุณสมบัติที่น่าประทับใจและเหมือน Apple ของ Vision Pro คือไม่มีคอนโทรลเลอร์แยกต่างหาก แต่คุณแค่ยักไหล่หรือกดสองนิ้วเข้าหากัน — และคุณสามารถทำได้ทุกที่ที่มือคุณอยู่

คุณไม่สามารถบีบนิ้วเข้าหากันทางด้านหลังได้ แต่คุณสามารถทำได้โดยนั่งสบายๆ โดยเอามือและแขนไปด้านข้าง

เราน่าจะเดาได้ว่าไม่เกินปี 2020 นั่นคือเวลาที่คำขอรับสิทธิบัตรชื่อ”อุปกรณ์อิเล็กทรอนิกส์พร้อมแถบตรวจจับ”บอกเรา

เราแค่คิดว่ามันเกี่ยวข้องกับ MacBook Pro ในอนาคต เนื่องจาก Apple ทำงานอย่างหนักเพื่อให้เราคิดเช่นนั้น แม้จะมีภาพวาดที่สื่อถึงแล็ปท็อป แต่ตอนนี้คำอธิบายบางส่วนก็ไม่ผิดเพี้ยน

ในปี 2020 ดูเหมือนว่าจะฉลาด การควบคุมวงแหวน ตอนนี้คุณเห็นแล้วสงสัยเกี่ยวกับการบีบนิ้วของ Vision Pro

“อุปกรณ์อิเล็กทรอนิกส์อาจมีแถบตรวจจับที่ยาว”คำขอรับสิทธิบัตรกล่าว”วงจรควบคุมอาจใช้แถบตรวจจับเพื่อรวบรวมอินพุตท่าทางอากาศจากนิ้วหรือส่วนอื่น ๆ ของร่างกายของผู้ใช้”

ไม่ใช่เฉพาะ iPhone เท่านั้นที่มีกล้อง

เมื่อคุณสงสัยว่า Apple ได้ซ่อนรายละเอียดของชุดหูฟังไว้อย่างชัดเจน คุณจะเริ่มเห็นทฤษฎีสมคบคิดทุกที่ ไม่ใช่ทุกสิทธิบัตรที่สามารถเป็นสิทธิบัตรของชุดหูฟังที่เป็นความลับได้ แต่เทคโนโลยีที่เกี่ยวข้องมากมายที่เราเห็นว่าตอนนี้ต้องแจ้งให้ Vision Pro ทราบเช่นเดียวกับอุปกรณ์ Apple อื่นๆ

ในปี 2021 มีการยื่นขอจดสิทธิบัตรที่ชื่อว่า”ระบบสำหรับการผลิตรูปภาพต่อเนื่องจากแหล่งที่มาของรูปภาพที่แยกจากกัน”ในตอนนั้น ดูเหมือนว่าจะเป็นความคิดที่ค่อนข้างยุ่งยากที่จะให้บุคคลหนึ่งคนสามารถถ่ายภาพโดยใช้ iPhone ของทั้งกลุ่มพร้อมกันได้

อาจเป็นเช่นนั้น แต่ในขณะที่สิทธิบัตรส่วนใหญ่พูดถึงการติดตั้งอุปกรณ์หลายชิ้น บางส่วนก็เกี่ยวกับการต่อภาพจากกล้องเหล่านี้ทั้งหมดเข้าด้วยกัน

การใช้หลายๆ กล้องเพื่อสร้างภาพหนึ่งภาพ

“ช่างภาพ ช่างวิดีโอ หรือบุคคลอื่นๆ อาจต้องการจับภาพโดยใช้อุปกรณ์จับภาพหลายตัว”Apple กล่าว”และรวมภาพที่ถ่ายโดยอุปกรณ์แต่ละตัวเข้าด้วยกัน ภาพเดียวต่อเนื่อง”

“ภาพที่ต่อเนื่องและรวมกันอาจมีขอบเขตการมองเห็นที่กว้างกว่าและมีข้อมูลภาพมากกว่าภาพที่แต่ละภาพที่ถ่ายโดยอุปกรณ์จับภาพ”คำขอรับสิทธิบัตรยังคงดำเนินต่อไป

เราจะไม่รู้ว่าฟีเจอร์การบันทึกของ Vision Pro ทำงานอย่างไรจนกว่าจะเปิดตัว แต่ดูเหมือนว่านี่จะเป็นการปูทาง

กรอบและจอแสดงผลที่บาง

มีรายงานว่า Apple มีความคิดเห็นที่แตกต่างกันมาเป็นเวลานานเกี่ยวกับว่าชุดหูฟังควรมีสองชิ้นหรือไม่ ท้ายที่สุด ดูเหมือนว่าจะประนีประนอมกันได้แล้วโดยมีเพียงแบตเตอรี่เป็นส่วนแยกต่างหาก แทนที่จะเป็นตัวควบคุมใดๆ

แต่ไม่ว่าจะเป็นเครื่องเดียวหรือผู้ใช้จะต้องพกพา iPhone ที่เชื่อมต่อไปด้วยก็ย่อมต้องมีแรงกดดันในการทำให้ทุกอย่างบางลง

เช่น กรอบรอบๆ หน้าจอ Apple Vision Pro ยังคงคล้ายกับแว่นตา แต่ก็บางพอที่จะใกล้เคียงกับแว่นสกีมากกว่าคู่แข่งส่วนใหญ่

รายละเอียดจากสิทธิบัตรแสดงวิธี เซ็นเซอร์วัดแสงอาจฝังอยู่ระหว่างพิกเซลของจอแสดงผล

เพื่อสร้างกรอบบางรอบหน้าจอและเพื่อซ่อนเซ็นเซอร์ไว้ด้านหลังกระจก Apple ได้จดสิทธิบัตรอีกฉบับในปี 2564″ระบบตรวจจับสำหรับการตรวจจับแสงตกกระทบ ไปจนถึงชั้นเปล่งแสงของจอแสดงผลอุปกรณ์อิเล็กทรอนิกส์”ตัดขอบและเซ็นเซอร์แบบฝัง

“[นี่] ฝาครอบป้องกันด้านนอกกำหนดพื้นผิวภายนอกของตัวเรือนของอุปกรณ์อิเล็กทรอนิกส์”คำขอรับสิทธิบัตรของ Apple กล่าว”อุปกรณ์อิเล็กทรอนิกส์ยังสามารถรวมระบบตรวจจับแสง เช่น แสงโดยรอบ เซ็นเซอร์”

“โดยปกติแล้ว ระบบตรวจจับแสงจะอยู่ด้านล่างฝาครอบป้องกันด้านนอก อยู่ติดกับและแยกออกจากบริเวณที่เปล่งแสงของกองจอแสดงผล”กล่าวต่อ

ตรวจจับผู้ใช้

เห็นได้ชัดว่าชุดหูฟังเป็นอุปกรณ์ส่วนตัวมากกว่าโทรศัพท์ และสามารถปรับให้เหมาะกับระดับสายตาที่แตกต่างกันได้ อะไร สิ่งที่ชัดเจนน้อยกว่าก็คือ Apple ดูเหมือนจะจำกัดอุปกรณ์ไว้สำหรับผู้ใช้และแขก 1 คนเท่านั้น

จากนั้น Apple ก็ไม่ได้ใช้เวลามากมายที่ WWDC เพื่อพูดคุยเกี่ยวกับการระบุตัวตนด้วยไบโอเมตริกซ์ ตอนนี้ เรารู้แล้วว่า Vision Pro ใช้ ระบบ Optic ID ใหม่เพื่อตรวจสอบผู้ใช้ เหมือนกับแว่นตาอัจฉริยะทั้งหมดใน”Mission: Impossible”

บางทีเราอาจจะเดาคำว่า Optic ID ไม่ได้ แต่อย่างน้อยเราก็ควรเดา Face ID จะมีส่วนร่วม ท้ายที่สุดจะมีการจดสิทธิบัตรและการยื่นขอสิทธิบัตรที่เกี่ยวข้องกับไบโอเมตริกของชุดหูฟังอย่างโจ่งแจ้ง แต่ในปี 2020 มีสิ่งหนึ่งที่เกี่ยวกับการยืนยันตัวตนสำหรับผู้ใช้ iPhone

นั่นเป็นเหตุผลว่าทำไมเราถึงได้รับเสียงรอบทิศทาง

เสียงรอบทิศทางก็ใช้ได้สำหรับผู้ใช้ iPhone เช่นกัน แต่ตอนนี้เรารู้แล้ว — และครั้งหนึ่งเราก็เดาได้. ในปี 2021 หนึ่งในหลายคำขอรับสิทธิบัตรเกี่ยวกับระบบเสียงเชิงพื้นที่ (SR) ได้พูดถึงการใช้งานจริงใน AR

“ตัวอย่างเช่น ระบบ SR อาจตรวจจับบุคคลที่เดินไปข้างหน้าสองสามก้าว และตอบสนองตามนั้น ปรับกราฟิกและเสียงที่แสดงต่อบุคคลนั้นในลักษณะที่คล้ายกับว่าฉากและเสียงดังกล่าวจะเปลี่ยนไปอย่างไรใน การตั้งค่าทางกายภาพ”คำขอสิทธิบัตรดังกล่าว

“ตัวอย่างเช่น บุคคลอาจมีปฏิสัมพันธ์กับและ/หรือสัมผัสวัตถุเกี่ยวกับหูซึ่งสร้างการตั้งค่าหูแบบหลายมิติ (เช่น สามมิติ) หรือเชิงพื้นที่ และ/หรือทำให้เกิดความโปร่งใสของหู”มันกล่าวต่อ

ลืมสมาร์ทริง

เป็นที่ถกเถียงกันว่าข่าวลือใดที่ตามมาอย่างเฉียบแหลมกว่ากัน ระหว่างชุดหูฟัง”Apple Glass”หรือ Apple Car แต่เบื้องหลังทั้งสองคือข่าวลือที่ยาวนานพอๆ กันว่า Apple กำลังพัฒนาสมาร์ทริง

เป็น Smart Ring หรือ Bandaid.

แต่ในปี 2020 มีการยื่นขอจดสิทธิบัตร 2 ฉบับ ซึ่งเมื่อมองย้อนกลับไปแล้ว เห็นได้ชัดว่ามีจุดประสงค์เพื่อเกี่ยวกับชุดหูฟัง คำขอรับสิทธิบัตรสำหรับ”อุปกรณ์วงแหวนที่สวมใส่ได้”ได้รับการปรับปรุงในปี 2020 ให้เกี่ยวกับ”อุปกรณ์สวมนิ้วไร้สาย”ซึ่งมีจุดประสงค์เพื่อควบคุม”อุปกรณ์อิเล็กทรอนิกส์ภายนอก”

แม้ว่าในปี 2020 จะมีคำขอรับสิทธิบัตรสำหรับสิ่งที่เรียกว่า”อุปกรณ์วงแหวนที่ขยายได้”

โปรดสังเกตว่าที่นี่ไม่มีม่านควัน กล่าวอย่างเฉพาะเจาะจงว่าอุปกรณ์สวมใส่เป็นส่วนหนึ่งของระบบที่รวมถึง”อุปกรณ์ที่สวมศีรษะซึ่งประกอบด้วยจอแสดงผลที่ผู้ใช้สามารถดูได้”

ชุดหูฟังจะมี”วงจรควบคุมที่กำหนดค่าให้ปรับภาพที่แสดงตามข้อมูลที่ได้รับ”และระบบโดยรวมจะรองรับ”การสื่อสารแบบสองทิศทางระหว่างอุปกรณ์วงแหวนและอุปกรณ์ที่สวมศีรษะ”

เมื่อพิจารณาจากสิ่งเหล่านี้ จึงเป็นเรื่องง่ายที่จะเห็นว่าแหวนที่ขยายออกไปจนครอบคลุมนิ้วทั้งนิ้วอาจเป็นเสมือนแทร็กแพดของชุดหูฟัง จากนั้นแอปพลิเคชันที่ได้รับนั้นเกี่ยวข้องกับอุปกรณ์เสริมของสมาร์ทริงอย่างชัดเจน ซึ่งจริง ๆ แล้วพูดถึงความจริงเสมือนด้วย

“ในขณะที่ผู้ใช้กำลังดูเนื้อหาเสมือนจริง… อาจมีการใช้อุปกรณ์นิ้วเพื่อรวบรวมการป้อนข้อมูลด้วยนิ้ว”กล่าว

อย่างที่เราทราบกันแล้วว่า Vision Pro ไม่ได้มาพร้อมกับอุปกรณ์ควบคุมภายนอกใดๆ แต่อย่างที่เรารู้ในตอนนี้ การขยับนิ้วเป็นหัวใจสำคัญของการทำงานของชุดหูฟัง

แทนที่จะใช้การเชื่อมต่อไร้สายระหว่างวงแหวนกับชุดหูฟัง กล้อง Apple Vision Pro จะคอยดูเมื่อผู้ใช้บีบนิ้วเข้าหากัน

แม้ว่าจะไม่สามารถระบุได้แน่ชัด แต่ดูเหมือนว่า Apple จะวิจัยสมาร์ทริงเพื่อใช้กับชุดหูฟังโดยเฉพาะ และตอนนี้ Vision Pro มีระบบที่ดีกว่า การวิจัยวงแหวนอาจไม่เคยปรากฏในอุปกรณ์จัดส่งเลย

อยู่ระหว่างการจดสิทธิบัตร

คำขอรับสิทธิบัตรทั้งหมด ไม่ว่าโดยบริษัทใดๆ จะถูกเขียนขึ้นมาเพื่อให้ใกล้เคียงกับการยื่นขอสิทธิบัตรในวงกว้าง จุดมุ่งหมายคือการป้องกันไม่ให้คู่แข่งใช้ความคิดหรือแม้แต่ทำสิ่งที่คล้ายกัน

ดังนั้นจึงเป็นไปได้ว่าตัวอย่างสิทธิบัตรใดๆ ที่ดูเหมือนจะเกี่ยวกับชุดหูฟังนั้นเป็นไปได้ว่าเป็นผลจากความครอบคลุมของชุดหูฟัง

แต่ปริมาณการวิจัยจำนวนมากที่ซ่อนเร้นอยู่ในสายตา หมายความว่าไม่ใช่เรื่องบังเอิญทั้งหมด

บางที Apple อาจใส่เซนเซอร์ท่าทางสัมผัสแบบอากาศบางลงใน MacBook Pro และแน่นอนว่าการทำงานทั้งหมดบนขอบจอที่เล็กลงจะต้องเป็นประโยชน์ต่ออุปกรณ์ทุกชิ้น

หรือบางที Apple อาจตัดสินใจว่าจะไม่เสียความพยายามทั้งหมด และเลือกที่จะปล่อยแหวนแต่งงานอัจฉริยะที่ตรวจจับการนอกใจได้

แต่เรารับฟังข่าวลือเกี่ยวกับชุดหูฟัง AR ของ Apple มานานแล้ว และตอนนี้ดูเหมือนว่าเราควรจะได้เห็นรายละเอียดเพิ่มเติมมากกว่าที่เราเคยทำ