Chegou o rastreamento da língua em VR

A demonstração de rastreamento facial do Meta Quest Pro mostra uma flor de pele verde com expressão de surpresa.
meta

Uma nova extensão de rastreamento facial permite que os usuários do Meta Quest Pro mostrem a língua para você em uma declaração sem palavras de seus sentimentos ou até mesmo soprem uma framboesa.

Qual a melhor forma de expressar um dia sufocante ou um treino exaustivo? Esta pode ser a tecnologia que revolucionará a RV em 2024. Estou sendo muito irônico?

Honestamente, é uma boa opção para adicionar ao rastreamento atual de mãos, olhos e rosto do Quest Pro. O headset VR mais caro da Meta já permite uma grande variedade de expressões. Posso gesticular com as mãos, piscar, piscar, mover os olhos e abrir e fechar a boca em várias posições. Você não pode fazer isso com o novo Quest 3 .

As línguas estavam abanando quando @0GUzzuqPjUVpY57 deu a notícia no X (antigo Twitter) , além de fornecer uma demonstração em vídeo mostrando dois avatares animados ao lado de um usuário do Quest Pro controlando a ação.

Como o Quest Pro inclui rastreamento facial, parece que o Meta deveria ter incluído rastreamento de língua, mas talvez achasse que seria controverso. A HTC fabrica um acessório Face Tracker para sincronizar os movimentos da boca e da língua com um avatar e é compatível com muitos fones de ouvido VR.

Claro, você não deve adicionar mais peso e despesas extras se puder evitá-lo. Com o novo módulo ALXR da korejan no Github , você pode se emocionar com a língua em aplicativos e jogos de VR para PC compatíveis, como o VRChat.

O desenvolvedor mostra a extensão de rastreamento de língua Quest Pro.
Um desenvolvedor mostra a extensão de rastreamento de língua Quest Pro. coreano

A extensão supostamente funciona com AirLink e Virtual Desktop da Meta por meio de um aplicativo chamado VDX. Você pode instalar uma extensão de rastreamento de língua como um módulo local para ALXR ou como um módulo remoto se usar streaming ALVR.

Se você não está familiarizado com VRChat e ALXR, precisará ler um pouco para entender como usar a extensão de rastreamento de língua. No tópico do tweet, há um link para o Reddit para mais detalhes sobre como começar.

Observe que a instalação desta extensão não adicionará línguas ao seu Meta avatar e não ajudará na versão Quest do VRChat. Além disso, poucos jogos e aplicativos suportam rastreamento facial. Provavelmente só vale a pena o esforço se você já estiver aproveitando o rastreamento facial ou corporal no VRChat ou outro aplicativo social de VR no seu PC .