A Apple quer saber toda vez que você move um músculo em qualquer parte do seu corpo, para que possa criar uma imagem mais precisa de sua forma física e possivelmente mapear melhor sua localização em uma sala.
A Apple já possui tecnologia como acelerômetros no Apple Watch, o que significa que é capaz de detectar automaticamente que você está andando, mesmo que você tenha esquecido de ativar o exercício Outdoor Walk. Recentemente, também solicitou a patente de uma câmera no Apple Watch que, assim como a fotografia, tratava da detecção de movimento.
Agora, dois pedidos de patente separados foram revelados, que apesar sendo aplicados por um ano de diferença, ambos visam detectar todos os movimentos-e usá-los.
“Posture Transition Detection And Classification Using Linked Biomechanical Model,”foi arquivado em setembro de 2021 e apenas revelado agora. Suas 17 páginas de detalhes – cerca de 8.000 palavras – são todas muito específicas sobre a detecção de uma mudança na postura.
“Os dispositivos móveis existentes incluem sensores de movimento que fornecem dados de movimento, como aceleração e taxa de rotação do dispositivo móvel”, diz a Apple neste pedido de patente.”Por exemplo, um pedômetro digital pode usar dados de aceleração para contar passos para determinar se o usuário está caminhando ou correndo.”
“Embora essas classificações amplas de atividades sejam úteis para muitos aplicativos móveis”, continua,”alguns aplicativos móveis se beneficiariam ao saber se a postura física de um usuário mudou, como ficar em pé de uma posição sentada ou vice-versa.”
Como sempre, com um pedido de patente , o foco é principalmente em como algo pode ser alcançado e não para o que pode ser usado. No entanto, há casos de uso claros mencionados no texto, como quando um usuário está usando um fone de ouvido e navegando em um ambiente real e virtual.
Quando os dispositivos que você está usando podem calcular a posição de todo o seu corpo e prever para onde o movimento o levará, ele pode alertá-lo sobre obstáculos reais ou virtuais. Essa habilidade presumivelmente poderia ser usada da mesma maneira para ajudar pessoas com deficiência visual a andar pelo mundo real.
A Apple fala pouco sobre os casos de uso, mas tem detalhes suficientes para mostrar que essa detecção de postura não é apenas para que a empresa possa incomodá-lo por não fazer abdominais.
“Em uma modalidade de áudio espacial, os dados de movimento de [um] fone de ouvido e o movimento do dispositivo de origem são fundidos no dispositivo de origem”, diz a Apple,”de modo que a posição e a atitude relativas podem ser calculadas pelo dispositivo de origem para uso em rastreamento de pose de cabeça para certos cenários de rastreamento para garantir que a base de som de áudio espacial esteja centralizada corretamente.”
“Em particular, o rastreamento da pose da cabeça usando movimento relativo é útil para determinar se a cabeça do usuário está girando enquanto o torso está parado ou se o torso do usuário se moveu”, continua.”Ambos os tipos de movimento seriam detectados pelo fone de ouvido e seriam indistinguíveis.”
Esse é um ponto recorrente no pedido de patente, que já pode ser possível detectar o movimento, mas não ser capaz de interpretá-lo correta ou totalmente.
A Apple diz repetidamente que sua proposta é usar combinações de dispositivos para determinar o que precisa. “Geralmente, o uso de dados de movimento do fone de ouvido e do dispositivo complementar permite que transições de postura do usuário mais complexas sejam detectadas”, diz.
Detecção de pose de corpo inteiro
Essa combinação de dispositivos também é fundamental para o segundo patente recém-revelada.”Estimativa de pose de corpo inteiro por meio da extração de recursos de vários dispositivos vestíveis”, arquivada em 2022, preocupa-se em detectar tudo o que é possível-usando todos os dispositivos concebíveis.
Detalhe de a patente mostrando um pouco da matemática por trás da detecção de pose
“Dispositivos vestíveis agora são predominantes na sociedade”, diz a Apple.”Muitos consumidores usam smartwatches e dispositivos auriculares diariamente… [e muitos desses dispositivos vestíveis incluem sensores inerciais que podem detectar o movimento do usuário.”
“Por exemplo, sensores inerciais embutidos em um smartwatch podem capturar o movimento do braço de um usuário, que pode ser usado por um aplicativo de condicionamento físico para calcular várias métricas de condicionamento físico, como a quantidade de calorias queimadas pelo usuário durante o exercício ,”Isto continua.”Alguns dispositivos auriculares (por exemplo, fones de ouvido) incluem sensores inerciais que controlam a reprodução de áudio, fornecem dados de orientação do microfone usados na formação de feixe para reduzir o ruído de fundo e rastreamento de cabeça para ancorar um campo sonoro de áudio espacial reproduzido pelos dispositivos auriculares.”
“[Eles podem juntos] fornecer um modelo esquelético de corpo inteiro mais preciso que pode fornecer informações detalhadas sobre os movimentos de um usuário”, diz a Apple,”permitindo um rastreamento de progresso aprimorado para várias atividades físicas ou monitoramento de saúde”.
“Uma vantagem adicional é que os dispositivos existentes já pertencentes ao usuário”continua o pedido de patente,”podem ser usados em combinação com módulos de sensores compactos e baratos (sensores inerciais, altímetro e câmera) que podem ser facilmente conectados a diferentes locais do corpo ou roupa do usuário para criar um sistema de detecção distribuído.”
“O uso de várias câmeras e sensores inerciais colocados em diferentes locais do corpo do usuário, combinados com dados de profundidade para o corpo inteiro, permite a geração de um modelo esquelético tridimensional mais preciso”, diz a Apple.
“[Esses dados] podem ser usados em uma variedade de aplicativos”, continua,”como aplicativos que detectam se uma pessoa caiu ou está doente, aplicativos que ensinam autonomamente regimes de exercícios adequados, esportes técnicas e atividades de dança…”
Os pedidos de patente sempre descrevem uma gama tão ampla de aplicações quanto possível e, neste caso, vão desde o condicionamento físico até como esses sistemas poderiam”entender a linguagem de sinais de corpo inteiro. (por exemplo, sinais de pista de aeroporto, sinais de policiais de trânsito, etc.).”
Esses dois pedidos de patente são incomuns porque se preocupam em criar uma maneira de conectar o que já existe. Mas ambos estão certos de que temos os dispositivos que podem detectar esses dados, portanto, um sistema que calcula corretamente as poses de corpo inteiro e as explora para nossa saúde e condicionamento físico é uma coisa boa.
Detalhe de a patente mostrando o uso de dados de pose de corpo inteiro
Ou pelo menos enquanto esses dados permanecerem conosco.
Cada um dos dois pedidos de patente usa o que parece ser agora uma seção padrão sobre privacidade. Em vez de comentar sobre quaisquer questões específicas de privacidade levantadas pelos pedidos de patente, o texto padrão assume que as”entidades responsáveis”por tal coleta de dados”cumprirão políticas de privacidade bem estabelecidas”.
A patente de postura é creditada a quatro inventores, incluindo Aditya Sarathy, cujo trabalho anterior para a Apple inclui um pedido de patente para”Monitoramento de postura e movimento usando dispositivos móveis”.
Três inventores trabalharam no pedido de patente de corpo inteiro, incluindo Wesley W. Zuber. Seu trabalho anterior inclui uma patente para feedback baseado em toque, como um sistema háptico no Apple Pencil.
