Como a Apple fará AirPods com câmeras?

O design de produtos inteligentes da Apple está se deixando levar.

De acordo com o repórter da Bloomberg Mark Gurman, a Apple tem duas ideias ousadas em seu planejamento de “dispositivos futuros”:

O primeiro é o HomePod com tela, que está em desenvolvimento e integrará múltiplas funções como Apple TV e FaceTime; o segundo são os AirPods equipados com câmera. A lente de baixa resolução será usada para coletar informações do entorno e processar o dados por meio de IA. "Ajudar as pessoas em suas vidas diárias."

Os dois produtos conceituais ainda estão em fase exploratória, mas ainda me surpreendo com essa combinação “vanguardista” e o contraste com o conceito “simples” da Apple, principalmente os fones de ouvido com lentes, que são um pouco intrigantes.

Ao navegar na literatura relevante, um documento de patente da Apple de codinome US11432095B1 parece provar a viabilidade da estranha combinação de “lente + fones de ouvido”.

O campo sonoro virtual é inseparável da lente do fone de ouvido

Deixe-me resumir primeiro: neste documento de patente, a câmera não é adicionada aos AirPods (Pro), mas sim aos AirPods Max. Além disso, a tecnologia envolvida não é a “função AI” revelada na notícia, mas já está no Vision Pro Os primórdios do áudio espacial.

Primeiro, precisamos esclarecer um princípio: como as pessoas identificam a localização de um som?

A disposição das duas orelhas em ambos os lados da cabeça, além de bonita, desempenha um papel mais importante ao nos dar a capacidade de ouvir e distinguir a posição dos sons.

Com a premissa de manter a mesma linha horizontal e simetria axial, procurem ficar o mais distantes possível um do outro, para que ao ouvir a mesma fonte sonora, a informação sonora recebida por cada ouvido seja diferente da outra, incluindo principalmente o diferença de tempo binaural. Existem três tipos: diferença de intensidade e diferença de frequência. De modo geral, essas diferenças são muito pequenas.

Tomemos a diferença de fuso horário como exemplo. A maioria dos sons na vida chega a dois ouvidos em momentos diferentes. A diferença geralmente é de apenas cerca de cem microssegundos (o tempo que leva para piscar 1/10 de um olho). Não podemos perceber isso, mas o cérebro pode detectá-lo pela diferença. Entre essas diferenças quase insignificantes nas informações da fonte sonora, é possível determinar qual foi ouvida primeiro e qual foi ouvida por último, criando assim uma sensação de "de onde veio o som".

Por exemplo, quando ativamos a função “encontrar celular” no relógio, nossos ouvidos podem detectar com sucesso que o celular caiu na fenda do sofá através das diferenças em várias fontes sonoras.

Muitos cinemas e equipamentos audiovisuais domésticos aproveitam as características extremamente sensíveis do ouvido humano para utilizar combinações multicanais num espaço limitado para obter som surround, tornando o filme envolvente ao nível do som.

As informações acima contêm dois elementos principais:

• As pessoas podem distinguir a localização dos sons através de diferenças nas informações da fonte sonora.
• Sons emitidos de diferentes locais do espaço criam diferenças auditivas

Este documento de patente US11432095B1 explica como a Apple permite que os usuários ouçam sons de todas as direções apenas por meio de fones de ouvido, como se tivessem um conjunto completo de equipamentos de som surround.

Esta tecnologia é chamada de “campo sonoro virtual”.

Um dispositivo com campo sonoro virtual pode construir nele vários alto-falantes virtuais. Através das características fisiológicas de audição e posicionamento, cada alto-falante pode ser colocado em uma posição fixa no espaço do usuário, percebendo assim que "um par de fones de ouvido é um conjunto de alto-falantes "Efeito.

Então, qual o papel da câmera nisso?

Blogueiro de tecnologia Ele fez um experimento no vídeo de revisão do Vision Pro: depois de colocar uma janela do aplicativo Vision Pro em uma posição fixa, ele caminhou mais de 300 metros e depois voltou ao local original. A posição da janela era quase invisível. ocorrem mudanças.

Esse posicionamento preciso vem do sistema de posicionamento visual na parte frontal do Vision Pro, que usa raios infravermelhos, câmeras, etc. para escanear as informações físicas do espaço e registrar a posição física da janela no espaço reconstruído, alcançando assim uma precisão surpreendente. posicionamento.

A câmera do AirPods Max também usa o mesmo princípio para registrar informações de imagem e, em seguida, o processador de rastreamento analisa as informações de posição da cabeça do usuário em tempo real e pode usar o mapeamento da tela e do ambiente circundante como referência para rastrear a cabeça do usuário , alcançando dupla garantia.

Emparelhado com a câmera na caixa da Apple TV, a posição do alto-falante virtual na sala pode ser determinada, e há uma base para onde as diversas fontes de som são colocadas e onde elas são emitidas.

Resumindo, a lente dá ao AirPods Max uma sensação de visão e o som virtual pode restaurar de perto o efeito dos alto-falantes físicos.

Em vez de ouvir, prefiro dizer que posso “ver” o som.

Onde e quantos alto-falantes virtuais serão colocados podem ser definidos pelo usuário. O som surround 5.1 ou 7.1 não precisa mais ser adquirido por um custo alto. Ele pode até ser ajustado em tempo real de acordo com o tamanho, posição e área de audição do ​a TV (incluindo a geometria da sala). ;Ao mesmo tempo, a postura sentada do usuário também afetará a posição do alto-falante virtual no campo sonoro.

O documento de patente também afirma que em um campo sonoro virtual, um conjunto separado de um ou mais alto-falantes virtuais pode ser gerado e atribuído a vários usuários com o mesmo dispositivo.

Mesmo que as duas pessoas troquem de lugar ou se movam pela sala, o campo sonoro virtual ajustará os efeitos sonoros de cada alto-falante virtual de acordo com a localização do usuário, para que cada fonte sonora permaneça estacionária em relação ao usuário.

Além disso, a patente também explica especificamente o “display”. A visualização da tela no campo sonoro virtual não se limita às TVs tradicionais, mas dispositivos com telas ou projeções podem implementar tais funções, como laptops e tablets. Computadores, projetores, desktops telas de computador, etc. (precisa ser usado com uma caixa Apple TV com câmera).

Em outras palavras, por que seu próximo conjunto de som surround não pode ser um fone de ouvido?

Sonhe primeiro, depois abra o caminho

Deste ponto de vista, o campo sonoro virtual construído pelos AirPods Max com lentes é mais parecido com a descentralização tecnológica do Vision Pro.

Em artigos anteriores, analisamos exaustivamente a "computação espacial" que o Vision Pro constrói por meio de vídeo espacial, áudio espacial e interação espacial. No entanto, o alto preço e poucas adaptações ecológicas ainda o tornam um produto ideal. Um produto conceitual que quer entrar no mercado.

A era da computação espacial aberta pelo Vision Pro é uma ideia distante. É uma coleção de tecnologia de exibição de ponta, novas interações e capacidades de computação. É mais como um objetivo e um futuro.

O AirPods Max no documento de patente usa um verdadeiro produto de "nível de consumo" para realizar áudio espacial na sala de estar. Comparado com o Vision Pro, é mais confortável de usar, mais conveniente de usar e, claro, o preço é mais razoável .

No processo de avançar em direção ao futuro, os objetivos distantes são divididos em etapas: a interação por gestos no Apple Watch e a gravação de vídeo espacial que o iPhone passa a suportar são etapas que já foram escaladas. Os fones de ouvido com lentes são outro ramo, que também permite que o áudio espacial encontre uma solução mais adequada ao uso diário e mais fácil de implementar.

Claro, a solução lente + fone de ouvido realmente chegará até nós? Mesmo que a Apple realmente integre os dois, ela avançará no sentido de usar IA para auxiliar o dia a dia das pessoas, conforme mencionado no início do artigo? Ou voltar ao percurso técnico do campo sonoro virtual do documento de patente? É difícil para nós obter uma resposta definitiva, mas à medida que várias novas tecnologias continuam a inundar o mercado, acabará por surgir uma opção que melhor se adapte aos tempos.

Antes disso, mais do que obter resultados, tentar constantemente com ousadia é o que há de mais valioso no momento.

Em 1972, Bernard D. Sadow, então ex-vice-presidente de uma empresa de malas em Massachusetts, removeu os quatro rodízios de um grande guarda-roupa, instalou-os no fundo de uma mala de marca própria e amarrou-os no topo do mala. Tenho um cinto.

Foi assim que foi inventada a primeira mala com rodinhas do mundo.

Hoje, olhando para trás, para a época em que a mala tipo carrinho foi inventada, é um pouco difícil de acreditar.

Primeiro, mais de 7.000 anos se passaram desde a invenção da caixa, e mais de 5.000 anos se passaram desde a invenção da roda.As duas invenções que acompanharam a maior parte da história da civilização humana apenas recentemente foram usadas em combinação;

Em segundo lugar, a Apollo 11 pousou com sucesso na Lua há dois anos, marcando a primeira vez que os humanos deixaram pegadas em outros planetas. No mesmo país, a invenção da caixa rolante foi ainda mais tardia do que o pouso na Lua. Antes disso, as pessoas ainda mantinham Hábito de mala.

Sadow imediatamente solicitou uma patente para sua nova invenção naquele ano e chamou a bagagem deslizante de Rolling Luggage.

A inovação às vezes realmente requer inspiração e sorte, mas a história não termina aqui.

Embora a Rolling Luggage fosse muito popular quando foi inventada, devido a falhas de design, o centro de gravidade da bagagem era instável, muitas vezes tombava ao ser puxada e ocasionalmente batia no tornozelo da pessoa que puxava a bagagem.

Acontece que esta é realmente uma boa ideia, mas a Rolling Luggage não é um bom produto.

Nos mais de dez anos seguintes, embora empresas como a Samsonite tenham otimizado o Rolling Luggage original, seu uso ainda era inconveniente.

Não foi até 1987 que Robert Plath, um capitão aposentado da Northwest Airlines, estava mexendo em uma mala em casa. Ele ergueu a mala e instalou rodas e uma barra de tração no mesmo lado, e o protótipo da mala moderna foi estabelecido. .

A bagagem de carrinho é uma coisa natural hoje em dia, mas isso não significa que a tecnologia em si seja óbvia, porque a inovação e as limitações dos inovadores estão intimamente relacionadas com o contexto da época.

Naquela época, as viagens de longa distância não eram tão comuns como são hoje, e não havia muitos itens para transportar durante a viagem. As malas dos carrinhos não eram estritamente necessárias. As malas e as rodas já existiam há muito tempo, mas os materiais das malas e tecnologia de rolamentos que fosse ao mesmo tempo leve e durável ainda não havia aparecido.

A procura não é elevada e a tecnologia é insuficiente.Mesmo que os componentes técnicos que constituem uma nova invenção existam precocemente, esta não se tornará uma invenção de sucesso porque as necessidades comportamentais, as condições técnicas e os factores de mercado não convergiram.

Para caixas sobre rodas, esta combinação só foi realmente possível na segunda metade do século XX.

Em relação a “lentes + fones de ouvido” ou outras combinações estranhas, o questionamento e o ridículo atuais apenas provam que a exploração da tecnologia futura está apenas começando.

Mas independentemente do caminho ou plano escolhido, todos estamos a dar passos em direção ao futuro. Sem estas ideias fantásticas e práticas ousadas, talvez ainda hoje carreguemos essa caixa pesada.

# Bem-vindo a seguir a conta pública oficial do WeChat de aifaner: aifaner (WeChat ID: ifanr).Mais conteúdo interessante será fornecido a você o mais rápido possível.

Ai Faner | Link original · Ver comentários · Sina Weibo