Pengguna perangkat Apple bahkan mungkin tidak perlu memanggil kata”Siri”di masa mendatang, dengan Apple meneliti cara menggunakan deteksi pandangan agar perangkat mengetahui keinginannya.
Pemilik beberapa perangkat di ekosistem Apple akan terbiasa dengan salah satu masalah yang kurang diketahui saat menggunakan Siri, yaitu membuatnya berfungsi di satu perangkat dan bukan di perangkat lainnya. Saat Anda berada di ruangan yang berisi iPhone, iPad, dan HomePod mini, mungkin sulit untuk menentukan perangkat mana yang benar-benar merespons permintaan, dan mungkin perangkat yang diinginkan pada saat itu belum tentu.
Selain itu, tidak semua orang merasa nyaman dengan perintah”Hey Siri”yang digunakan sama sekali, itulah sebabnya Apple baru-baru ini mengumumkan pemotongannya menjadi hanya”Siri”, atau setidaknya pada perangkat tertentu.
Meski begitu, penggunaan”Siri”atau”yang salah Hey Siri”— dan frase pemicu dari asisten digital lainnya — di televisi dan radio masih dapat menyebabkan munculnya pertanyaan yang mungkin tidak diinginkan oleh pengguna.
Kemudian ada juga kemungkinan pengguna perlu berinteraksi dengan perangkat tanpa menggunakan suaranya sama sekali. Tentu saja ada situasi di mana perintah perlu dikeluarkan dari jarak jauh, atau di mana canggung secara sosial untuk berbicara dengan perangkat.
Dalam paten yang baru diberikan disebut”Kontrol perangkat menggunakan tatapan informasi,”Apple menyarankan mungkin untuk memerintahkan Siri secara visual. Secara khusus, ini mengusulkan agar perangkat dapat mendeteksi pandangan pengguna untuk menentukan apakah pengguna tersebut menginginkan perangkat tersebut untuk merespons.
Pengarsipan menyarankan sistem yang menggunakan kamera dan sensor lain yang mampu menentukan lokasi pengguna dan jalur pandangan mereka, untuk mengetahui apa yang mereka lihat. Informasi ini dapat digunakan untuk secara otomatis mengatur perangkat yang dilihat untuk masuk ke mode penerimaan instruksi di mana ia secara aktif mendengarkan, dengan harapan bahwa instruksi akan diberitahukan kepadanya.
Jika asisten digital menginterpretasikan apa yang bisa menjadi perintah dalam keadaan ini, ia kemudian dapat melaksanakannya seolah-olah pemicu verbal telah diucapkan sebelumnya, menyelamatkan pengguna dari satu langkah. Ini masih memungkinkan frasa seperti”Hai Siri”berfungsi, terutama saat pengguna tidak melihat perangkat.
Menggunakan pandangan sebagai barometer apakah pengguna ingin memberi tahu asisten digital suatu perintah juga berguna dengan cara lain. Misalnya, tatapan yang terdeteksi saat melihat perangkat dapat mengonfirmasi bahwa pengguna secara aktif menginginkan perangkat untuk mengikuti perintah.
Dalam istilah praktis, ini bisa berarti perbedaan antara perangkat yang menafsirkan fragmen kalimat seperti”mainkan Elvis”sebagai perintah atau sebagai bagian dari percakapan yang seharusnya diabaikan.
Untuk pemilik beberapa perangkat, deteksi tatapan dapat memungkinkan instruksi dibuat untuk satu perangkat dan bukan perangkat lain, dipilih dengan melihatnya.
Pengarsipan menyebutkan bahwa hanya dengan melihat perangkat tidak serta merta mendaftar sebagai niat untuk mendengarkan instruksi, karena seperangkat”kriteria aktivasi”harus dipenuhi. Ini hanya bisa terdiri dari tatapan terus menerus untuk jangka waktu tertentu, seperti sedetik, untuk menghilangkan pandangan sekilas atau positif palsu dari seseorang yang menoleh.
Sudut posisi kepala juga penting. Misalnya, jika perangkat terletak di lemari samping tempat tidur dan pengguna ditidurkan di tempat tidur, perangkat berpotensi menghitung pengguna yang menghadap perangkat sebagai pandangan tergantung pada bagaimana mereka berbaring, tetapi dapat mendiskontokannya untuk mewujudkan keinginan pengguna. kepala berada di sisinya, bukan vertikal.
Sebagai tanggapan, perangkat dapat memberikan sejumlah indikator kepada pengguna bahwa asisten telah diaktifkan secara sekilas, seperti suara bising atau pola cahaya dari LED atau layar bawaan.
Dengan kemampuan untuk mendaftarkan pandangan pengguna, sistem juga dapat mendeteksi jika pengguna melihat objek yang ingin mereka ajak berinteraksi, daripada perangkat yang memegang asisten virtual. Misalnya, pengguna dapat melihat salah satu dari beberapa lampu di dalam ruangan, dan perangkat dapat menggunakan konteks tatapan pengguna untuk mengetahui lampu mana yang diinginkan pengguna untuk dinyalakan dari sebuah perintah.
Perangkat di sekitar dapat mendeteksi pandangan pengguna terhadap objek lain yang dapat dikontrol di sebuah ruangan.
Awalnya diajukan pada 28 Agustus 2019, paten mencantumkan penemunya sebagai Sean B. Kelly, Felipe Bacim De Araujo E Silva, dan Karlin Y. Bark.
Apple mengajukan banyak aplikasi paten setiap minggu, tetapi meskipun keberadaan paten menunjukkan bidang minat untuk upaya penelitian dan pengembangannya, Apple tidak menjamin paten tersebut akan digunakan dalam produk atau layanan di masa mendatang.
Kemampuan untuk mengoperasikan perangkat dari jarak jauh telah beberapa kali muncul dalam pengajuan paten sebelumnya. Misalnya, paten tahun 2015 untuk”estimasi pose tangan dan jari berbasis pembelajaran”menyarankan penggunaan sistem pemetaan 3D optik untuk gerakan tangan, yang mungkin mirip konsepnya dengan perangkat keras Microsoft Kinect.
Pengarsipan lain dari tahun 2018 untuk”Komputasi multi media atau sistem hiburan untuk merespons kehadiran dan aktivitas pengguna”mengusulkan pengenalan data sensor tiga dimensi untuk menghasilkan peta kedalaman ruangan, yang dapat berupa digunakan untuk pengenalan gerakan seluruh ruangan.
Deteksi pandangan juga telah dieksplorasi secara ekstensif, terakhir terkait dengan headset Apple Vision Pro.
