Como uma empresa está dando superpoderes ao seu smartwatch Wear OS
“Esta é uma questão de construir a próxima tela sensível ao toque”, disse Ohto Pentikäinen, CEO de uma empresa chamada Doublepoint , ao apresentar o Digital Trends ao seu fascinante sistema de controle por gestos de última geração. A melhor maneira de pensar nisso é como o recurso Double Tap da Apple com esteróides.
Conversei com Pentikäinen por videochamada durante a CES 2024 para saber mais.
Mais que um aplicativo
Você já deve ter visto o aplicativo Doublepoint lançado para Wear OS, chamado Wow Mouse , na CES 2024, mas é apenas o começo do que a empresa está trabalhando. Wow Mouse adiciona controle de gestos ao seu smartwatch Wear OS, transformando-o efetivamente em um mouse no pulso que usa movimentos dos dedos e do pulso para operar. Mas Wow Mouse é uma demonstração relativamente básica do que a Doublepoint está fazendo.
“Oferecemos algo muito mais abrangente”, disse Pentikäinen quando questionado sobre o aplicativo Wow Mouse, “e podemos fazer muito mais do que apenas um toque. A maior coisa que nosso hardware atual é capaz de fazer é apertar e segurar, o que significa que você pode rolar e manipular objetos.”
Doublepoint chama isso de ‘microgestos’ e eles incluem tudo, desde tocar para selecionar, tocar para rolar e toques duplos. Ter gestos adicionais que vão alémdo gesto de pinça dupla do Double Tap é muito atraente e explica por que Pentikäinen comparou a tecnologia a uma tela sensível ao toque, pois ela replica muitos dos mesmos gestos que já usamos neles.
Então, como funciona o sistema da Doublepoint?
Como funcionam esses gestos
“O modo como a detecção de microgestos funciona é diferente do rastreamento manual baseado em visão computacional”, explicou Pentikäinen, usando uma comparação familiar. “Isso usa a câmera para calcular a pose da sua mão, e faz isso a cada milissegundo ou qualquer que seja a taxa de quadros quando seus dedos se tocam. A forma como detectamos o toque usa a Unidade de Medição Inercial.”
A Unidade de Medição Inercial (IMU) parece uma peça especial de hardware, mas na verdade inclui simplesmente um acelerômetro, giroscópio e magnetômetro. Em outras palavras, sensores centrais encontrados em quase todos os smartwatches e outros wearables .
“Ele procura uma vibração causada quando seus dedos se tocam”, disse Pentikäinen, momento em que os algoritmos da Doublepoint diferenciam essa vibração de todas as outras vibrações que ocorrem quando você move os dedos. No entanto, o gesto inovador de apertar e segurar, que é muito incomum e crítico para o apelo do algoritmo, é um pouco diferente e muito mais complicado.
“Para pinçar e segurar, também precisamos saber quando seus dedos são mantidos juntos e, na verdade, usamos o monitoramento dos tendões para isso. Usamos o sensor óptico de frequência cardíaca não para observar os músculos, mas os tendões que conectam o dedo ao músculo, e é o movimento que nos diz quando você para de tocar”, disse ele.
Configuração e precisão
Parte do sucesso do Double Tap da Apple é que ele funciona sem qualquer instalação ou configuração e também é altamente preciso. E o sistema da Doublepoint?
“Queríamos torná-lo um dos nossos pontos de venda desde o início, pois não precisaríamos de nenhuma configuração e, quando você o coloca, ele funciona instantaneamente. O que isso significa é que precisamos de ter um processo em vigor para recolher dados de uma ampla variedade de pessoas e ter em conta fatores relevantes como o Índice de Massa Corporal (IMC), a idade e os níveis de melatonina. Conseguimos atingir níveis de precisão muito, muito bons. Quase na faixa de 97% a 98%. Claro, ainda há muito trabalho a fazer”, disse ele.
O que também é interessante é que um smartwatch com reconhecimento de gestos da Doublepoint pode ser emparelhado com outros dispositivos Bluetooth, como aqueles com rastreamento ocular, para que funcionem juntos. Isso torna sistemas de controle como este mais naturais e também mais privados, já que não há necessidade de reconhecimento de voz como backup ou alternativa.
Qualcomm está interessada
Os controles por gestos não são novidade , mas não há dúvida de que o sistema Double Tap da Apple reacendeu o interesse por eles recentemente. E é provável que só receba mais atenção quando o headset Vision Pro for lançado, já que outros sistemas concorrentes podem tentar coisas novas e diferentes para tornar o controle dos headsets mais fácil e intuitivo. Portanto, provavelmente não é nenhuma surpresa saber que a Qualcomm está interessada na tecnologia da Doublepoint.
“Temos um acordo de fornecedor com a Qualcomm”, revelou Pentikäinen. “Isso significa que a ideia é incorporar nossos algoritmos aos chips Qualcomm, e eles, é claro, fornecem esses chips para vários fornecedores diferentes de relógios e rastreadores de fitness no mercado hoje.”
Além da Qualcomm, também está trabalhando com empresas de sensores para incorporar seu algoritmo no próprio sensor. Depois, há a plataforma smartwatch de referência da própria empresa, que Pentikäinen disse “foi projetada para dar às pessoas uma ideia do que podemos fazer com [os algoritmos] e mostrar como poderíamos transformá-los em um produto”.
Em breve?
Isso significa que um novo smartwatch com gestos e tecnologia de apertar e segurar da Doublepoint que permite rolar, deslizar e alterar valores como volume ou brilho estará disponível em breve?
“Não temos cronogramas confirmados sobre quando nossos parceiros poderão levar seus produtos ao mercado, mas eu diria que essas coisas estão evoluindo muito rapidamente”, disse Pentikäinen.
Várias vezes durante nossa breve conversa, Pentikäinen fez comparações entre o sistema de controle por gestos da Doublepoint e a tela sensível ao toque, e finalizamos com uma explicação melhor de por que ele os criou.
“A tela sensível ao toque começou basicamente no telefone e agora a vemos em todos os lugares”, disse ele. “Ele habilitou todos os tipos de novos dispositivos. A Apple dobrou o reconhecimento de gestos no ano passado e basicamente mostrou que os gestos serão uma forma vital de melhoria. Então, para nós, queremos apenas permitir isso para o maior número possível de empresas, usando o que pensamos ser a próxima tela sensível ao toque.”
Embora tenhamos que esperar a chegada de um smartwatch com a tecnologia Doublepoint, você pode experimentar uma versão básica por meio do aplicativo Wow Mouse , que está pronto para download no Google Play para smartwatches Wear OS selecionados agora.