Esqueça Dall-E, você pode se inscrever para criar vídeos gerados por IA agora

Dall-E, ChatGPT e outras tecnologias de geração de IA continuam a nos surpreender. Ainda assim, ferramentas de geração de imagem de IA como o Midjourney podem parecer chatas quando você vê as novas habilidades de geração de vídeo com IA que em breve estarão disponíveis para todos nós.

O Runway fornece um editor de vídeo on-line avançado que oferece muitos dos mesmos recursos de um aplicativo de desktop. A empresa diferenciou seu serviço de outros, no entanto, por ser pioneira no uso de ferramentas de IA que ajudam em várias tarefas de vídeo demoradas, como mascarar o fundo.

Um quadro de um vídeo gerado por IA no estilo claymation.

Agora, a Runway elevou sua mágica de vídeo a um novo nível, anunciando no Twitter uma nova oferta de geração de vídeo de IA que excede tudo o que foi mostrado antes, até mesmo por empresas líderes de IA como Google e Meta . Conhecido como Gen-1, este modelo AI usa um vídeo que você fornece, junto com um prompt, para gerar uma renderização notavelmente estável e de alta qualidade que corresponde à estrutura do original, mas com um estilo muito diferente.

Runway é uma nova cara no mundo do conteúdo gerado por IA, mas vem dos co-criadores do Stable Diffusion , que é uma popular ferramenta de IA de conversão de texto em imagem disponível no Mac.

O prompt pode ser baseado em texto ou você pode fornecer uma imagem para usar como estilo para processar o vídeo. Existem cinco modos de operação atualmente. O modo de estilização captura a aparência de uma imagem e a aplica ao vídeo. O modo Storyboard substitui mais do vídeo original. A ideia é que você esteja apenas fornecendo espaços reservados para a IA substituir.

Para obter mais precisão, o modo Máscara permite especificar qual parte ou assunto do vídeo deve ser afetado pelo processo de IA. O modo de renderização é semelhante ao Storyboard, adicionando muitos detalhes extras ao vídeo fornecido. O Runway também possui um modo de personalização que oferece muito mais opções para discar o que você deseja.

Mesmo nesta forma nascente, é muito melhor do que os vídeos que foram meticulosamente montados a partir de centenas de imagens geradas por IA. Em vez de uma turbulência caótica, os vídeos de amostra são coesos e fluem com muito mais naturalidade.

O acesso antecipado ao Gen-1 começou hoje. E os resultados já estão nos surpreendendo. h/t @MatthewPaquette

Junte-se à lista de espera hoje. Compartilhe com os amigos para entrar mais cedo. #Gen1 https://t.co/a41n97xl1u https://t.co/eWHLkeMqWx pic.twitter.com/U2nF3z3DZ7

— Pista (@runwayml) 8 de fevereiro de 2023

A geração de vídeo Gen-1 da Runway já está disponível no acesso antecipado, e o tweet acima detalha como você pode entrar na lista de espera. Enquanto isso, confira o vídeo do YouTube da Runway, que tem uma resolução melhor que o vídeo do Twitter. A parte boa é de cerca de 40 segundos.