O Google está trazendo superpoderes de IA para a câmera do seu smartphone, e isso parece ridículo

Parece que os assistentes de IA são antigos, ou é isso que o Google quer que você acredite, pois estamos na era dos agentes de IA – e o Google I/O 2024 provou isso rapidamente. Diga olá ao Projeto Astra, um agente generativo de IA com recursos de visão, texto e fala, com uma pitada de recursos de memória e consciência espacial a reboque.

Pense nisso como olhos para o seu telefone que podem dar sentido ao mundo ao seu redor. Aponte-o para uma equação matemática e ele a resolverá. Apontando a câmera para um gato? Astra irá sugerir um nome adequado para o miau-ster felino. Pergunte onde você deixou seus fones de ouvido e, se o sensor da câmera os tiver visto, dirá algo como “Você os deixou no sofá”.

O Astra pode entender o código que aparece em uma tela, identificar objetos e explicar o que eles fazem, identificar edifícios e muito mais. Pense nele como o Google Lens, mas para o mundo inteiro, e pode entender quase tudo na frente das lentes da câmera.

Ao contrário do Google Assistant, você não precisa avisá-lo. Basta apontar a câmera para qualquer coisa, fazer a pergunta em áudio e o Astra explicará em uma resposta em linguagem natural. O Google afirma que o Projeto Astra será lançado por meio do aplicativo Gemini ainda este ano.

Um agente de IA que tudo vê?

Se o Projeto Astra parece familiar, é porque a OpenAI demonstrou um recurso semelhante para ChatGPT – alimentado pelo novo modelo GPT-4o – há apenas um dia. A ferramenta OpenAI está atualmente em fase de red teaming para testes de segurança e será lançada em fases, começando com os assinantes do ChatGPT Plus.

O Google não dirá se o Astra terá uma etiqueta de preço. Mas dada a quase espontaneidade das respostas, o tipo de processamento visual de dados envolvido e os recursos generativos necessários para oferecer uma resposta significativa, é improvável que o Astra seja servido como um benefício gratuito devido aos requisitos de computação.

O melhor exemplo seria a assinatura Google One AI Premium, que já esconde algumas das novas experiências do Gemini atrás de um acesso pago. Mas até agora, o Astra parece ser a inovação de IA mais incrível que o Google já apresentou desde que impressionou o mundo com os recursos do Duplex, há alguns anos.