A última atualização da Runway já está produzindo resultados alucinantes
As pessoas também estão se divertindo com a geração de vídeo para vídeo da Runway, lançada em 13 de setembro. Essencialmente, o recurso permite transformar radicalmente o estilo visual de um determinado videoclipe usando instruções de texto.
Confira o vídeo abaixo para ver um exemplo que altera a mente do que é possível.
Runway Gen-3 Alpha acaba de subir de nível com Video-to-Video
Agora você pode transformar o estilo de qualquer vídeo usando apenas instruções de texto com qualidade incrível.
10 exemplos malucos do que é possível: pic.twitter.com/onh12zCzpI
— Min Choi (@minchoi) 15 de setembro de 2024
Os entusiastas da IA também estão produzindo efeitos visuais impressionantes que podem ser exibidos no headset Vision Pro da Apple, dando-nos uma dica potencial sobre o que os desenvolvedores que utilizam a API anunciada recentemente serão capazes de realizar.
O usuário do X (ex-Twitter) , Cristóbal Valenzuela, postou um breve clipe no site de mídia social na segunda-feira mostrando os recursos combinados do Gen-3 e do Apple Vision Pro.
Experimentos iniciais renderizando Gen-3 em cima do Apple Vision Pro, feitos por @Nymarius_ pic.twitter.com/SiUNR0vX0G
— Cristóbal Valenzuela (@c_valenzuelab) 15 de setembro de 2024
O vídeo mostra um espaço de escritório em plano aberto com uma sobreposição gerada que faz com que a sala pareça ruínas profundas da selva. Alguns usuários não estavam convencidos da veracidade do vídeo, mas segundo a postagem, ele foi gerado por alguém que realmente trabalha na Runway .
O usuário do Twitter e criador de conteúdo Cosmo Scharf exibiu efeitos semelhantes em sua postagem, além de fornecer evidências visuais adicionais para respaldar suas afirmações.
Gen-3 Alpha vídeo para vídeo é notável!
Aqui está um teste do Vision Pro.
Um dia isso será executado em tempo real em óculos de realidade mista e seu mundo nunca mais será o mesmo. #VisionHack pic.twitter.com/GTgartg5ry
— Cosmo Scharf ᯅ (@cosmoscharf) 15 de setembro de 2024
A Runway anunciou na segunda-feira o lançamento de uma nova API que permitirá aos desenvolvedores adicionar recursos de geração de vídeo a uma variedade de dispositivos e aplicativos, embora haja algumas restrições sobre quem pode realmente acessar a API. Por um lado, o lançamento é limitado no momento, mas você pode se inscrever para uma lista de espera aqui . Você também precisará ser assinante do plano Build ou Enterprise. Depois de obter acesso, você só poderá aproveitar a iteração do modelo Gen-3 Alpha Turbo, que é um pouco menos capaz do que o carro-chefe da empresa, Gen-3 Alpha .
A empresa planeja cobrar um centavo por crédito de geração para usar o serviço. Para contextualizar, um único segundo de geração de vídeo custa cinco créditos, então, basicamente, os desenvolvedores pagarão 5 centavos por segundo de vídeo. Os desenvolvedores também serão obrigados a “exibir com destaque” um banner “Powered by Runway” com link para o site da empresa em qualquer interface que chame a API.
Enquanto o espaço de geração de vídeo comercial fica cada vez mais lotado – com Firefly da Adobe , Sora da Meta, o gerador de vídeo AI do Canva, Kuaishou Technology Kling e Video-01 da Minimax, para citar apenas alguns – a Runway está se diferenciando por ser uma das primeiro a oferecer seus modelos como uma API. Ainda não se sabe se isso será suficiente para recuperar os exorbitantes custos de formação da empresa e levá-la à rentabilidade.