MidJourney on Video chega ao iOS! Você pode filmar um blockbuster mágico em 3 minutos e toda a Internet vai enlouquecer
Apresentamos o Runway, um software mágico de IA, que permite gerar um blockbuster com efeitos especiais inserindo texto ou adicionando efeitos mágicos ao seu vídeo, assim como usar IA para gerar imagens.
Por exemplo, se você deseja transformar um vídeo de dança comum em algo legal, pode enviar um vídeo e uma imagem de referência para o Runway, e isso pode ajudá-lo a gerar um vídeo com os efeitos mágicos correspondentes.
Nos últimos dias, a Runway lançou oficialmente seu primeiro aplicativo "RunwayML" no iOS. Você pode gravar vídeos e renderizar efeitos de IA em tempo real em seu celular. Fazer vídeos de IA é tão fácil quanto usar uma câmera com filtro, o que reduz bastante o limiar.
Baixamos o app RunwayML pela primeira vez e fizemos um vídeo gerado por IA. Vem ver como funciona 
Seis modos predefinidos
Que tal, não parece uma versão de baixo custo de "O Universo Instantâneo"?
Atualmente, o RunwayML foi lançado na App Store, que pode ser baixado gratuitamente e pode ser usado após o registro.
Após o registro, há uma certa quantidade de experiência gratuita, que é suficiente para enviar para o Moments.
Fazer um vídeo de IA como esse não é nada complicado.
Runway pré-configura seis estilos de imagem, incluindo escultura em argila, nuvens, origami, aquarela, tinta de papel e esboço.
Você pode gravar imediatamente ou fazer upload de um vídeo do álbum e, em seguida, escolher um estilo de sua preferência para gerar um vídeo AI do estilo correspondente.
Por exemplo, se você escolher um estilo de origami, o vídeo se tornará um mundo de origami.
Diferente dos filtros com os quais estamos mais familiarizados, o Runway reconhecerá os itens do vídeo o máximo possível e transformará todos os itens em um estilo unificado. Por exemplo, no mundo do origami, as pessoas se tornam pessoas de papel e as mesas se tornam grandes papelões .
O vídeo gerado pelo RunwayML também terá uma pequena marca d'água no canto inferior direito, e a marca é gerada pela IA.
Embora os vídeos gerados pela Runway tenham muitas falhas e não sejam perfeitos, sua criatividade única e métodos de apresentação interessantes fazem as pessoas brilharem.Pode-se dizer que a diversão é muito mais importante do que a perfeição.
Vale ressaltar que o Runway ainda tem algumas restrições, por exemplo, os usuários não podem fazer upload de imagens com mais de cinco segundos e não podem ser usadas para fins proibidos, como gerar nudez ou obras protegidas por direitos autorais.
Seja criativo com fotos
Além dos seis estilos predefinidos, você também pode fazer upload de referências de imagens para o Runway e deixá-lo gerar um vídeo do estilo correspondente para você. Isso enriquece muito a jogabilidade dos vídeos AI.
Por exemplo, carreguei o trabalho clássico de Yayoi Kusama "Pumpkin" e meu vídeo de selfie, e Runway gerou um mundo de abóbora com pontos e me tornei o homem abóbora por dentro.
Amplie a imaginação com palavras
Se você não encontrar o estilo que deseja, basta inserir suas ideias diretamente nele.
O terminal móvel Runway também suporta a função de geração de texto e vídeo. Você só precisa inserir o estilo que deseja na caixa de diálogo na forma de um prompt, e o Runway analisará e praticará por si só. Pode-se dizer que é um "super festa B".
Por exemplo, eu quero um vídeo de selfie no estilo Van Gogh. Depois de inserir a palavra-chave "Vincent van Gogh Painting", ele me atraiu para o mundo de Van Gogh em menos de um minuto. muito interessante.
Em outras palavras, a jogabilidade do Runway está diretamente relacionada à sua imaginação.Você pode transformar os carros na estrada em naves espaciais ou em peixes no tanque de peixes.
Pode fazer um tabuleiro de xadrez cheio de flores, e também pode transformar um ciclista em um futuro guerreiro.
Atualmente, a Runway usa apenas seu modelo de primeira geração Gen-1 no terminal móvel. A Runway disse que fará mais otimizações e trará o modelo Gen-2 para o terminal móvel.
Comparado com o modelo Gen-1, o Gen-2 alcança maior consistência e fidelidade de tempo.Em termos humanos, a conexão entre as imagens é mais suave e a qualidade da imagem é ainda maior.
Com o Gen-2, você está um passo mais perto de gerar vídeos de sua imaginação a qualquer hora, em qualquer lugar.
Digite uma palavra rápida que não seja muito longa: montanhas fotografadas por drones. Com base nisso, o Runway gera a seguinte tela.
Aqui está outra: a luz do sol da tarde entrando pelas janelas de um apartamento na cidade de Nova York.
Vá para uma versão avançada, alimente imagens e texto para o Runway e, em seguida, gere um pequeno vídeo.
▲ O texto é: Um homem está andando na rua, e as luzes de néon dos bares ao redor o iluminam
▲ Imagem original
Ou anime uma imagem estática.
Também é possível renderizar diretamente uma imagem dinâmica de uma animação não texturizada a ser renderizada.
O progresso do Runway é óbvio para todos. Ele foi mais longe e mais suave na estrada contra o modelo de rede. A versão Gen-2 de hoje pode ser considerada "assistível". Embora não seja excelente, o futuro pode ser esperado.
Você também quer entrar no "multiverso"? Tem alguma ideia maluca e ideias que deseja implementar?
Depois de ler o artigo, pegue seu telefone e transforme suas ideias em realidade. Este é o "momento TikTok" dos vídeos de IA.
#Bem-vindo a prestar atenção à conta pública oficial do WeChat de Aifaner: Aifaner (ID do WeChat: ifanr), conteúdo mais interessante será apresentado a você o mais rápido possível.
