A Apple está jogando um “jogo de imitação” que engana os sentidos

O recurso do iPad Pro 2024 que mais me interessa não é o novo chip M4 ou a nova tela OLED, mas uma pequena “reação química” entre o Apple Pencil Pro e o iPad Pro 2024: quando você usa o Apple Quando o Pencil Pro está desenhando e escrevendo no iPad Pro 2024, a sombra do pincel correspondente será exibida na tela para que os usuários saibam em que modo o Apple Pencil Pro está atualmente.

Posteriormente, alguém encontrou 10 modelos 3D desenvolvidos pela Apple para esse recurso na estrutura PencilKit da Apple.

E o que é interessante é que essa sombra não é uma textura simples. Ela mudará de acordo com a posição do Apple Pencil Pro no mundo real, a distância da tela e o ângulo de inclinação. , “sensação de espaço” e “interatividade”.

Mais informações sobre este Apple Pencil Pro também foram reveladas: a Apple o encheu com um novo mecanismo de feedback tátil, um novo sensor de pressão, um giroscópio e um chip U2. Ele tem potencial para simular uma experiência real de escrita no iPad Pro e também pode ser vinculado ao Vision Pro.

O jogo imitador da Apple

A Apple é a empresa mundial que gosta de simular experiências sensoriais do mundo real por meio de hardware.

O Taptic Engine instalado no MacBook 2015 atinge com sucesso "falso e real" por meio de delicada simulação de vibração e toque. Talvez até agora muitas pessoas ainda não saibam que o trackpad Force Touch do MacBook é uma superfície plana que “não pode ser pressionada”.

Independentemente de ser o 3D Touch ou o atual Haptic Touch não sensível à pressão, o iPhone usa esse vidro plano para simular uma sensação mágica de rebote quando o botão é pressionado por meio do feedback de vibração correto. pessoas incapazes de resistir a pressioná-lo várias vezes.

A mesma tecnologia também é usada no botão Home do iPhone 7 e na coroa giratória do Apple Watch, ambos proporcionando uma sensação tátil muito próxima dos botões e engrenagens mecânicas.

Além de usar o Taptic Engine para “enganar” os dedos dos usuários, os dispositivos iOS 14 e AirPods criam “áudio espacial” que simula sons em várias direções no espaço 3D e tecnologia de rastreamento de cabeça para trazer “som envolvente” aos usuários. . Nas plataformas sociais, muitos usuários disseram que, depois de ativar o áudio espacial, pensaram que seus telefones estavam tocando do lado de fora quando colocaram os fones de ouvido.

Antes do lançamento do Apple Pencil Pro, muitas fontes previam que a Apple equiparia esta nova caneta com um novo Taptic Engine, para que o Apple Pencil Pro e o iPad também pudessem fornecer uma sensação de fricção realista próxima à do papel e da caneta.

Isso parece um pouco “ficção científica”, mas não faz com que as pessoas se sintam irracionais, porque a Apple é um fabricante que gosta e é bom em brincar com motores vibratórios. Mesmo que o Lápis atual ainda não tenha implementado funções relevantes, ainda é promissor no futuro.

Outra empresa que também gosta de usar hardware para enganar os sentidos dos usuários é a Nintendo.

O controlador Joy-Con no Nintendo Switch suporta a tecnologia “Vibração HD”. Os jogadores podem distinguir a diferença sutil entre “despejar gelo em um copo” e “despejar água em um copo” apenas confiando em diferentes sensações de vibração. Combinado com o traje de papel Switch Labo, o giroscópio e o motor vibratório na alça também podem recriar a verdadeira sensação de pescar peixes na água.

Quer seja a magia vibratória da Apple ou o kit e controlador Labo da Nintendo, “uma peça de hardware” é usada para simular “inúmeras possibilidades”.

Por exemplo, o Taptic Engine no iPhone 7 não apenas simula o botão Home e o 3D Touch, o telefone vibra como uma "cabeça balançando" quando a senha é digitada incorretamente, mas também vários feedbacks no sistema. neste enorme Taptic Engine interno concluído.

O áudio espacial é semelhante. Por meio de giroscópios e acelerômetros, o AirPods Max pode simular sons complexos com uma sensação de orientação espacial.

Se a Nintendo pretende trazer aos jogadores uma experiência de jogo mais realista, então o “jogo de imitação” da Apple é uma gama completa de simulações, abrangendo toque, audição e visão.

Portanto, a projeção do Apple Pencil Pro não é de forma alguma um pequeno ovo de páscoa isolado.

Plano de conclusão do Vision Pro

Durante o processo de teste do visionOS no ano passado, alguns desenvolvedores descobriram que quando o usuário segurava o Apple Pencil, o Vision Pro não conseguia reconhecer a operação de pinçar os dedos normalmente. No entanto, o feedback oficial dizia que “este é um recurso projetado e não um BUG. ." Reconhecimento visível O Apple Pencil provavelmente já está presente no Vision Pro.

A adição de hardware como mecanismo de feedback tátil, novo sensor de pressão, giroscópio e chip U2 o torna mais parecido com um controlador VR menor, e a lógica é bastante semelhante.

Coincidentemente, a Logitech lançou uma caneta para dispositivos VR, MX INK, para Meta Quest 2 e 3.

Esta caneta, que é 10 gramas mais pesada que o Apple Pencil 2, pode não apenas criar conteúdo plano em um ambiente de realidade mista como uma caneta tradicional, mas também suporta rastreamento de seis graus de liberdade para criar livremente no espaço 3D. com Existem vários botões e a ponta da caneta também é sensível à pressão.

Então, o Vision Pro precisa de uma caneta? Em outras palavras, requer “periféricos” além de olhos e dedos?

Antes de falar sobre esta questão em aberto, podemos dar uma olhada na série de vídeos científicos populares que a Apple preparou para desenvolvedores na WWDC24: como "Criando uma experiência envolvente de uso de fotos e vídeos no espaço".

Muitas coisas conceituais são mencionadas nele. A Apple divide a experiência de vídeo estereoscópico em: vídeo 3D, vídeo espacial e vídeo imersivo da Apple:

• O vídeo 3D é apresentado em uma superfície plana e o conteúdo tem uma sensação de profundidade, semelhante aos filmes 3D que assistimos no cinema.
• O vídeo espacial, além de ter sentido tridimensional, o conteúdo será dimensionado para o tamanho real do objeto e os limites ficarão desfocados.
• O vídeo envolvente envolve completamente o usuário. O usuário não está assistindo ao vídeo, mas imerso nele.

Entre eles, o “vídeo espacial” pode imitar a sensação de presença das pessoas no mundo real e pode alterar o ângulo de visão dentro de uma determinada faixa, enquanto o “vídeo envolvente” é ainda mais extremo. usuário da parte do vídeo.

Além disso, a Apple também apresentou requisitos adicionais. Por exemplo, os vídeos imersivos precisam ter conteúdo 3D interativo.

O conceito de “metadados espaciais” também é mencionado no vídeo científico popular, e também há uma explicação de “projeção”: A projeção define a relação entre os objetos no mundo e os pixels na imagem.

O pequeno ovo de páscoa no Apple Pencil Pro também é explicado no popular vídeo científico do desenvolvedor do Vision Pro: a Apple nunca considerou o iPad Pro 2024 e o Apple Pencil Pro como dispositivos separados.

Em outras palavras, um Apple Pencil pode ser “projetado” em várias canetas de diferentes formatos no mundo virtual do Vision Pro no futuro.

Como o Vision Pro pode explicar as dúvidas sobre o Apple Pencil Pro, então a Apple, como mestre desse “jogo de imitação”, também temos motivos para acreditar que o atual Vision Pro ainda está na fase inicial do produto, e já pode alcançar um grau considerável de desempenho visual e auditivo É “falso e real”, mas está longe de ser suficiente em termos de toque. Isso naturalmente se resume ao fato de que o Vision Pro não possui periféricos especialmente adaptados. conte com o Vision Pro para nos surpreender, certo?

Agora, temos quase certeza de que o Apple Pencil Pro com mecanismo de vibração, giroscópio e chip U2 pode ser vinculado ao Apple Pencil Pro e também pode ser projetado na tela em “outras aparências”, como uma caneta de tinta, então esta Talvez; a caneta poderia ser usada como os controladores de outros dispositivos VR, transformando-se em um sabre de luz no jogo Saber Beat ou em uma varinha na série Harry Potter?

Se você puder ser um pouco mais imaginativo, talvez a Apple lance uma “luva de force feedback”. Toda a luva é coberta por motores de vibração e, com o ajuste da Apple, os usuários podem realmente “tocar” o mundo virtual apresentado pelo Vision Pro.

É quase certo que a Apple já está pensando em maneiras de adicionar mais “interações” ao Vision Pro, porque o Vision Pro ainda não está completo e o “jogo de imitação” da Apple de substituir a realidade pela virtualidade está longe de terminar.

A importância do “realismo”

Em artigos anteriores, discutimos a importância das chaves. Quando se trata do Vision Pro, um cenário que permite aos usuários experimentar “sem desempenho físico”, a interação e o feedback podem ser considerados ainda mais importantes. O editor-chefe da revista de tecnologia “Wired” disse certa vez:

Todos os dispositivos requerem interação. Se algo não parecer interativo, será considerado quebrado.

Isso combinou perfeitamente com minha primeira experiência com o Vision Pro: não importa de que maneira ou onde tentei usar os gestos, não consegui clicar no botão que queria clicar e nem sabia que era um problema com o Vision Pro. ou é problema meu.

Portanto, mesmo que a Apple tenha que cortar o fone de ouvido de 3,5 mm e reduzir a capacidade da bateria, ela ainda precisa abrir espaço para um enorme Taptic Engine, que não só prolonga a vida útil do componente ao abandonar a estrutura mecânica, mas também garante o realismo do feedback interativo.

A verdadeira sensação de interação não é apenas um sinal para saber se o dispositivo está quebrado. Se você quiser ir mais fundo, mudamos completamente da era do “botão” para a era do “toque” e também estamos entrando na era do “ar”. operação de condicionamento" era. No futuro, talvez não precisemos mais tocar em nenhum dispositivo para realizar diversas operações. Várias UIs holográficas nos cercarão. Tudo o que precisamos fazer é apontar para o ar ou usar o controle de voz para fazer o que quisermos.

Este futuro confuso entre o virtual e a realidade nos trará todos os tipos de incerteza. Por exemplo, como você sabe que é uma pessoa viva e não um cérebro em uma cuba?

Talvez o “jogo de imitação” da Apple um dia termine completamente com mudanças nas operações, mas antes disso, ainda podemos esperar como a Apple usará vários métodos para enganar nossos dedos e cérebros.

# Bem-vindo a seguir a conta pública oficial do WeChat do aifaner: aifaner (WeChat ID: ifanr). Mais conteúdo interessante será fornecido a você o mais rápido possível.

Ai Faner | Link original · Ver comentários · Sina Weibo |