Microsoft Copilot agora tem voz e pode ‘ver o que você vê’ na internet

Você pode querer começar a tratar seu navegador como se estivesse sempre no trabalho, pelo menos se quiser usar o novo recurso Copilot Vision da Microsoft . O recurso, que é nativamente integrado ao Microsoft Edge , é capaz de “ver o que você vê e ouvir o que ouve” enquanto você navega no navegador, de acordo com o vice-presidente executivo da Microsoft, Yusuf Mehdi.

Toda essa espionagem de IA não é à toa. O Copilot Vision analisa o que você está fazendo online para responder perguntas, fornecer recomendações e resumir o conteúdo. Pode funcionar com o novo recurso Copilot Voice, por exemplo. A Microsoft demonstrou os recursos do Rotten Tomatoes, mostrando um usuário conversando com o Copilot enquanto navega no site e procura recomendações de filmes. No final das contas, o Copilot optou por uma comédia australiana para o locutor australiano, dizendo que fez a escolha porque “bem, você é australiano”. Acho que isso leva em conta o contexto pessoal.

Compreensivelmente, a ideia de uma IA observando tudo o que você faz online pode incomodar algumas pessoas. A Microsoft diz que o recurso é apenas opcional, o que significa que você deve ativá-lo manualmente e que haverá um indicador na tela mostrando que o Copilot está observando o que você está fazendo. A Microsoft também afirma que os dados da sua sessão serão excluídos após você fechá-la e que os dados não serão usados ​​para treinamento.

Além disso, a Microsoft afirma que o Copilot Vision funcionará inicialmente apenas com um número limitado de sites. Ainda não temos a lista completa, mas pelo menos o recurso não funcionará em “conteúdo com acesso pago ou confidencial”. A Microsoft também ressalta que o recurso não processa nada em uma página da web – ele apenas vê o texto e as imagens de uma página e os analisa.

O Copilot Voice funciona em conjunto com o Copilot Vision, mas também funciona sozinho. Em desktops e dispositivos móveis, a Microsoft diz que agora você poderá manter uma conversa com o Copilot usando apenas sua voz.

Com base nos novos recursos de voz, a Microsoft está lançando o Copilot Daily. É quase como um noticiário matinal personalizado, resumindo histórias e fornecendo detalhes diários, como trânsito e previsão do tempo. Isso também é construído com uma voz generativa de IA que orienta você nas notícias da manhã todos os dias. Ele é gerado com base no conteúdo com o qual você interage.

Copilot Voice e Copilot Daily estão sendo lançados para usuários do Windows agora nos EUA e no Reino Unido. O Voice também está disponível na Austrália, Canadá e Nova Zelândia, mas apenas em inglês. A Microsoft afirma que em breve levará o recurso para mais países e idiomas.

O Copilot Vision começará a ser lançado “em breve” nos EUA, mas apenas para assinantes do Copilot Pro . O recurso faz parte do novo programa Copilot Labs da Microsoft, que oferece aos assinantes do Copilot Pro acesso antecipado aos recursos de IA mais recentes da Microsoft que ainda estão sendo testados.