Apple ingin mengetahui setiap kali Anda menggerakkan otot di bagian tubuh mana pun, sehingga Apple dapat membuat gambaran kebugaran Anda secara lebih akurat, dan juga mungkin memetakan lokasi Anda di ruangan dengan lebih baik.
Apple sudah memiliki teknologi seperti akselerometer di Apple Watch yang dapat secara otomatis mendeteksi Anda sedang berjalan, meskipun Anda lupa mengaktifkan olahraga Outdoor Walk. Itu juga baru-baru ini mengajukan paten untuk kamera di Apple Watch yang, serta untuk fotografi, tentang mendeteksi gerakan.
Sekarang dua aplikasi paten terpisah telah terungkap, meskipun diterapkan selama satu tahun terpisah, keduanya bertujuan untuk mendeteksi setiap gerakan — dan menggunakannya.
“Deteksi dan Klasifikasi Transisi Postur Menggunakan Model Biomekanis Tertaut,”diajukan pada September 2021, dan hanya terungkap sekarang. Detail 17 halamannya-sekitar 8.000 kata-semuanya sangat spesifik tentang mendeteksi perubahan postur.
“Perangkat seluler yang ada menyertakan sensor gerak yang menyediakan data gerak, seperti akselerasi dan laju rotasi perangkat seluler,”kata Apple dalam permohonan paten ini.”Misalnya, pedometer digital dapat menggunakan data akselerasi untuk menghitung langkah guna menentukan apakah pengguna sedang berjalan atau berlari.”
“Meskipun klasifikasi aktivitas yang luas ini berguna untuk banyak aplikasi seluler,”lanjutnya,”beberapa aplikasi seluler akan mendapat manfaat dengan mengetahui apakah postur fisik pengguna telah berubah, seperti berdiri dari posisi duduk atau sebaliknya.”
Seperti biasa dengan aplikasi paten , fokusnya terutama pada bagaimana sesuatu dapat dicapai daripada digunakan untuk apa. Meskipun demikian, ada kasus penggunaan yang jelas disinggung dalam teks, seperti saat pengguna memakai headset dan menavigasi lingkungan nyata dan virtual.
Saat perangkat yang Anda kenakan dapat menghitung posisi seluruh tubuh Anda, dan memprediksi ke mana gerakan akan membawa Anda, ini dapat mengingatkan Anda akan rintangan nyata atau virtual. Kemampuan ini mungkin dapat digunakan dengan cara yang sama untuk membantu orang tunanetra berjalan melalui dunia nyata.
Apple tidak banyak bicara tentang kasus penggunaan, tetapi memiliki spesifikasi yang cukup untuk menunjukkan bahwa deteksi postur ini tidak hanya agar perusahaan dapat mengganggu Anda karena tidak melakukan sit-up.
“Dalam perwujudan audio spasial, data gerakan dari [a] headset dan gerakan perangkat sumber digabungkan dalam perangkat sumber,”kata Apple,”sehingga posisi dan sikap relatif dapat dihitung oleh perangkat sumber untuk digunakan dalam pelacakan pose kepala untuk skenario pelacakan tertentu untuk memastikan bahwa lapisan suara audio spasial berada di tengah dengan benar.”
“Secara khusus, pelacakan pose kepala menggunakan gerakan relatif berguna untuk menentukan apakah kepala pengguna berputar saat tubuh mereka diam atau apakah tubuh pengguna telah bergerak,”lanjutnya.”Kedua jenis gerakan tersebut akan dirasakan oleh headset dan tidak dapat dibedakan.”
Itu adalah poin berulang dalam aplikasi paten, yang mungkin sudah dapat mendeteksi gerakan, tetapi tidak dapat menafsirkannya dengan benar atau sepenuhnya.
Apple berulang kali mengatakan bahwa usulannya adalah tentang penggunaan kombinasi perangkat untuk menentukan apa yang dibutuhkannya.”Umumnya, penggunaan data gerakan dari headset dan perangkat pendamping memungkinkan transisi postur pengguna yang lebih kompleks untuk dideteksi,”katanya.
Deteksi pose seluruh tubuh
Kombinasi perangkat tersebut juga penting untuk paten yang baru diungkapkan.”Estimasi Pose Seluruh Tubuh Melalui Ekstraksi Fitur Dari Beberapa Perangkat yang Dapat Dipakai,”diajukan pada tahun 2022, berkaitan dengan mendeteksi segala sesuatu yang mungkin — menggunakan setiap perangkat yang memungkinkan.
Detail dari paten yang menunjukkan beberapa matematika di balik deteksi pose
“Perangkat yang dapat dipakai sekarang lazim di masyarakat,”kata Apple.”Banyak konsumen memakai jam tangan pintar dan perangkat telinga setiap hari… [dan banyak dari perangkat yang dapat dikenakan ini menyertakan sensor inersia yang dapat merasakan gerakan pengguna.”
“Misalnya, sensor inersia yang disematkan pada jam tangan pintar dapat menangkap gerakan lengan pengguna yang kemudian dapat digunakan oleh aplikasi kebugaran untuk menghitung berbagai metrik kebugaran, seperti jumlah kalori yang dibakar pengguna selama berolahraga ,”lanjutnya.”Beberapa perangkat telinga (misalnya, earbud) menyertakan sensor inersia yang mengontrol pemutaran audio, memberikan data orientasi mikrofon yang digunakan dalam beamforming untuk mengurangi kebisingan latar belakang, dan pelacakan kepala untuk menambatkan bidang suara audio spasial yang diputar melalui perangkat telinga.”
“[Ini bersama-sama] memberikan model kerangka seluruh tubuh yang lebih akurat yang dapat memberikan wawasan terperinci tentang gerakan pengguna,”kata Apple,”memungkinkan peningkatan pelacakan kemajuan untuk berbagai aktivitas kebugaran atau pemantauan kesehatan.”
“Keuntungan tambahan adalah bahwa perangkat yang ada sudah dimiliki oleh pengguna”melanjutkan aplikasi paten,”dapat digunakan dalam kombinasi dengan modul sensor kompak murah (sensor inersia, altimeter dan kamera) yang dapat dengan mudah dipasang ke lokasi berbeda dari tubuh atau pakaian pengguna untuk membuat sistem penginderaan terdistribusi.”
“Menggunakan beberapa kamera dan sensor inersia yang ditempatkan di berbagai lokasi tubuh pengguna, dikombinasikan dengan data kedalaman untuk seluruh tubuh memungkinkan dihasilkannya model kerangka tiga dimensi yang lebih akurat,”kata Apple.
“[Data ini] dapat digunakan dalam berbagai aplikasi,”lanjutnya,”seperti aplikasi yang mendeteksi jika seseorang jatuh atau sakit, aplikasi yang secara otomatis mengajarkan cara olahraga yang benar, olahraga teknik dan aktivitas menari…”
Aplikasi paten selalu mendeskripsikan aplikasi seluas mungkin, dan dalam hal ini mulai dari kebugaran hingga bagaimana sistem tersebut dapat”memahami bahasa isyarat seluruh tubuh. (misalnya, sinyal landasan pacu bandara, sinyal polisi lalu lintas, dll.).”
Kedua aplikasi paten ini tidak biasa karena mereka ingin menciptakan cara untuk menghubungkan apa yang sudah ada. Tapi keduanya benar bahwa kami memiliki perangkat yang dapat mendeteksi data ini, jadi sistem yang menghitung pose seluruh tubuh dengan benar dan kemudian memanfaatkannya untuk kesehatan dan kebugaran kami, adalah hal yang baik.
Detail dari paten yang menunjukkan penggunaan data pose seluruh tubuh
Atau setidaknya selama data ini tetap bersama kami.
Masing-masing dari dua aplikasi paten menggunakan apa yang tampaknya menjadi bagian standar tentang privasi. Alih-alih mengomentari masalah privasi tertentu yang diangkat oleh aplikasi paten, teks standar mengasumsikan bahwa”entitas yang bertanggung jawab”atas pengumpulan data semacam itu”akan mematuhi kebijakan privasi yang telah ditetapkan dengan baik.”
Paten postur dikreditkan ke empat penemu, termasuk Aditya Sarathy, yang karya sebelumnya untuk Apple mencakup aplikasi paten untuk”Pemantauan Postur dan Gerakan Menggunakan Perangkat Seluler”.
Tiga penemu mengerjakan aplikasi paten seluruh tubuh, termasuk Wesley W. Zuber. Karyanya sebelumnya mencakup paten untuk umpan balik berbasis sentuhan, seperti sistem haptik di Apple Pencil.
