Como a câmera inteligente do Surface Hub 2 usa A.I. para reinventar reuniões

A Microsoft vem investindo em sua marca Surface para torná-la uma parte maior do espaço de reunião no local de trabalho – e o aumento no trabalho híbrido tornou isso ainda mais importante.

O Surface Hub 2 e o Surface Hub 2S são os frutos desse trabalho, mas a Microsoft agora está desenvolvendo os Surface Hub 2 Smart Camera. Ele foi projetado para tornar a experiência de reunião melhor para as pessoas na sala com um Surface Hub 2 e Hub 2S, bem como para aqueles que estão participando remotamente.

Tive a oportunidade de conversar com Dave Alles, vice-presidente da Divisão de Superfícies da Microsoft, sobre a nova câmera e o futuro do trabalho remoto.

Serve uma multidão

Para começar, Alles me falou sobre a herança dos produtos Surface Hub e Surface em geral. “Do Surface Duo, Surface Pro ou Surface Go, há muito do portfólio Surface que é ótimo para brainstorming e sessões de colaboração em tempo real que facilitam muito a transição do PowerPoint para o quadro branco e vice-versa”, disse ele.

Ele então entrou no raciocínio por trás do Surface Hub 2 Smart Camera e como ele é um produto diferente para a Microsoft. De acordo com os próprios dados da Microsoft, o usuário médio do Teams viu um aumento de mais de 200% em termos de tempo de reunião semanal desde março de 2020. A maioria dessas reuniões não foi agendada.

A Microsoft vê essa tendência como uma oportunidade de criar produtos e inovações de software para ajudar mais pessoas a realizar seu trabalho e fazer com que todos sintam que podem participar de reuniões.

“Gostamos de pensar que estávamos construindo soluções híbridas antes da pandemia. Achamos que esta é uma mudança muito durável, e a importância dos participantes remotos para todos os tipos de reuniões aumentou permanentemente, e o Surface Hub, quando emparelhado com dispositivos habilitados para caneta, é uma ferramenta poderosa”, disse Alles.

É também por isso que o Surface Hub 2 Smart Camera é um produto diferente de qualquer outra webcam no mercado. Ele captura claramente quem está falando na frente de um Surface Hub 2 ou 2S e o que mais pode estar acontecendo na sala. Ele se conecta magneticamente à parte superior do Surface Hub 2 ou Surface Hub 2S e fica em um corpo de alumínio usinado. Ele também usa processamento de sinal, inteligência artificial e ótica para melhorar suas reuniões do Teams, mesmo para aqueles que podem não estar fisicamente na sala.

Fancy talk à parte, isso significa que a câmera é capaz de reenquadrar, ajustar a iluminação e permitir amplos ângulos de visão. Ele faz tudo isso sem nenhum problema de distorção, distorção ou profundidade de campo que as webcams tradicionais podem enfrentar. Isso mesmo se alguém sair ou entrar na sala, ou subir ou interagir com a tela.

“Todas as câmeras de PC que você vê estão focadas em uma faixa que não é para o cenário de ficar de pé e andar pela sala. Para o Surface Hub, você está em um foco ou sala de conferência e temos uma lente que garante que podemos manter as pessoas claras. Também podemos ter muito mais humanos no quadro, enquanto uma câmera de PC tem um design que pressupõe que há um único usuário”, explicou Alles.

Mais do que uma webcam

Mas como isso funciona? Bem, é graças a um sensor de 12 megapixels que possui uma lente de campo de visão de 136 graus que pode manter as coisas próximas e distantes simultaneamente, independentemente do tamanho ou da configuração de uma sala de conferência. A câmera também é capaz de lidar com 1 teraflop de poder de computação, ou um trilhão de cálculos de ponto flutuante por segundo.

Um algoritmo foi desenvolvido para compensar automaticamente as correções de inclinação, distorção e grande angular para que os objetos apareçam como na vida real. A Microsoft me diz que emprestou parte dessa ideia dos filmes de Hollywood, então o movimento e o zoom que a câmera capta não é muito agressivo para as pessoas do outro lado da ligação.

Alles continuou explicando que os ângulos de visão do Surface Hub 2 Smart Camera são o que o torna único. O campo de visão real é de mais de 180 graus, então a câmera pode ver atrás do Hub 2 em que está. O software então corta o feed para obter o ângulo de 136 graus, para que seu rosto possa ser visto claramente se você estiver ao lado da câmera. Ser capaz de ter clareza em profundidade de campo curta e longa ao mesmo tempo é outra coisa que o torna único.

“O que realmente queríamos fazer era obter um campo de visão super amplo e um sensor que mostrasse rostos claros se alguém estivesse ao lado do painel do Surface Hub 2, ou mesmo pudesse ver a pessoa em pé. nos fundos da longa sala de conferências. Aumentamos toda a tecnologia, seja a tecnologia de vidro, um sensor ou os recursos de computação, para poder acomodar esses casos”, disse Alles.

“Todas as outras câmeras têm um ponto de foco específico e, em seguida, as coisas que estão longe desse ponto de foco ficam embaçadas. Somos únicos no mundo de ter rostos distantes e rostos próximos muito claros ao mesmo tempo”, acrescentou.

Isso tudo parece legal, então você pode estar se perguntando se a câmera funcionará para o seu PC. Perguntei e Alles disse que a Smart Camera Surface Hub 2 é apenas para Surface Hub 2 ou Surface Hub 2 S. Não é compatível com PCs por causa de seu sistema de montagem, que usa um plugue USB-C de tamanho personalizado e um POGO plugue.

O software e os algoritmos dentro da câmera também são especialmente ajustados para cenários de sala de conferência, com espaço aberto e várias pessoas. A Microsoft precisaria reajustar o algoritmo da câmera para que se concentrasse em pessoas próximas. Há uma pequena chance de isso acontecer.

“Essas são coisas possíveis de se fazer, parece haver bastante interesse, e tenho certeza de que é algo sobre o qual falaremos, mas não vamos oferecer no PC”, disse Alles.

Preço e disponibilidade

A Smart Camera Surface Hub 2 está disponível hoje para compra em todos os mercados onde o Surface Hub é vendido por US$ 800. Ele também será fornecido com o Surface Hub 2s de 85 polegadas a partir de 31 de maio por US $ 22.000. Ele também combina com várias atualizações para o Microsoft Teams, bem como Whiteboard, PowerPoint e Outlook.

Os recursos são todos servidos para tornar as reuniões e trabalhar muito mais naturais para os trabalhadores híbridos. Para os dispositivos Surface Hub 2 e Teams Rooms especificamente, isso inclui Front Row em Teams . Com isso, a galeria de vídeos aparece na parte inferior da tela para que os participantes da sala possam ver colegas remotos cara a cara, quase como se estivessem na mesma sala. A base de código do quadro branco também foi unificada para que o quadro branco no Surface Hub pareça e pareça semelhante ao quadro branco no Windows.

Completando as notícias relacionadas à conferência, estão as Salas do Teams. Também está recebendo aprimoramentos em que, se você ingressar em uma reunião em uma sala do Teams, será solicitado a ativar o vídeo do laptop para que possa ser visto claramente pelos participantes remotos, não importa onde esteja na sala. Seu vídeo ficará oculto na tela da frente da sala, bem como na galeria de pessoas que ingressaram em dispositivos complementares na sala. A Microsoft fala sobre tendências no trabalho híbrido e além em seu relatório 2022 Work Trend Index .