O Copilot Vision AI da Microsoft agora é de uso gratuito, mas apenas para estes 9 sites

Depois de meses de teasers, visualizações e lançamentos selecionados, o Copilot Vision da Microsoft agora está disponível para teste para todos os usuários do Edge nos EUA. A nova ferramenta de IA chamativa foi projetada para observar sua tela enquanto você navega, para que você possa fazer várias perguntas sobre o que está fazendo e obter respostas úteis e adequadas ao contexto. O principal problema, porém, é que atualmente ele funciona apenas com nove sites.

Na maior parte, esses nove sites também parecem escolhas bastante aleatórias. Temos a Amazon, o que faz sentido, mas também o Geoguessr? Tenho certeza de que o objetivo desse site é tentar adivinhar onde você está no mapa sem qualquer ajuda . De qualquer forma, a lista completa do site é a seguinte:

  • Wikipédia
  • Tripadvisor
  • Williams-Sonoma
  • Amazônia
  • Alvo
  • Wayfair
  • Comida e Vinho
  • OpenTable
  • Geoguessr

O CEO da Microsoft AI, Mustafa Suleyman, anunciou o lançamento no Bluesky ontem e compartilhou alguns de seus casos de uso favoritos.

Copilot Vision já está disponível gratuitamente no Edge. Ele pode literalmente ver o que você vê na tela (se você ativar). Muito incrível! Ele pensará em voz alta com você quando estiver navegando online. Chega de explicar demais, copiar e colar ou se esforçar para colocar algo em palavras.

Mustafa Suleyman (@mustafasuleymanai.bsky.social) 16/04/2025T17:05:32.762Z

Normalmente, quando você quer fazer uma pergunta ao Copilot, você mesmo tem que escrever os parágrafos de contexto e, além de ser lento e chato, isso também pode ser bastante difícil se você estiver tentando perguntar sobre algo que não sabe muito sobre.

Com o Copilot Vision, em vez de tentar descrever o que você está vendo ou sobre o que está falando, o modelo de IA pode ver diretamente na tela.

Assim, seguindo os exemplos de Suleyman, você pode pesquisar “lençóis respiráveis” na Amazon e perguntar ao Copilot se algum dos resultados é feito de tecidos apropriados. O Copilot pode indicar os tecidos certos ou dar exemplos de tecidos respiráveis ​​para você procurar.

No site de receitas Food & Wine, o Copilot pode ajudá-lo a ficar com as mãos livres enquanto cozinha, respondendo às suas perguntas e lendo partes da receita para você. Isso funciona porque toda a experiência foi projetada para funcionar por voz – você fala diretamente com a IA e a IA responde.

De acordo com um dos vídeos na página Copilot Vision , no entanto, parece que você também pode digitar perguntas e receber respostas por escrito.

A Microsoft está indo muito devagar e com cuidado com esse recurso, quase certamente porque deseja evitar desencadear outra reação como aconteceu com o Recall. O número limitado de sites compatíveis está ligado a questões de direitos autorais, e a empresa faz questão de ressaltar que o recurso é “opt-in”, não grava sua tela, só fica ativado quando você o liga e exclui os dados assim que você encerra uma sessão.

Se estiver interessado em testá-lo, você pode configurar as coisas e ver um pequeno tutorial no site da Microsoft .