Runway Gen-2
O Runway Gen-2 é um modelo avançado de geração de vídeo multimodal, que permite aos utilizadores criar vídeos a partir de prompts de texto, imagens ou videoclipes existentes. Foi lançado pela Runway em fevereiro de 2023 como um dos primeiros modelos de texto/imagem para vídeo disponíveis comercialmente . Experimente a Gen-2 abaixo!
Geração de texto para vídeo
Com o Runway Gen-2, os utilizadores podem criar vídeos simplesmente inserindo instruções de texto descritivas. A sua IA interpreta estes avisos para criar conteúdo de vídeo, permitindo aos utilizadores visualizar conceitos que podem não existir na realidade.
Veja o seguinte exemplo fornecido pela Runway:
Imediato | Vídeo de saída |
O sol do fim da tarde a espreitar pela janela de um loft em Nova Iorque. |
Geração de imagem para vídeo
A funcionalidade imagem para vídeo do Gen-2 permite a geração de vídeos com base numa imagem enviada, conhecida como "imagem de condução". Com isto pode criar conteúdo dinâmico que reflita a essência da imagem original.
Imagem | Vídeo de saída |
Pincel de movimento
Runway Gen-2 apresenta uma poderosa ferramenta Motion Brush , que permite aos utilizadores adicionar movimentos controlados a áreas específicas das suas criações de vídeo.
O Motion Brush permite aos utilizadores pintar sobre determinadas áreas de uma imagem e, em seguida, atribuir dinâmicas de movimento aos elementos selecionados. Esta funcionalidade simplifica o processo de geração de vídeo: permite aos utilizadores criar animações sem a necessidade de entradas complexas ou extensas capacidades de edição.
Imagem de amostra escovada com movimento da pista | Saída |
Controle Cameral
A funcionalidade de controlo de câmara do Runway Gen-2 oferece aos utilizadores recursos avançados para manipular os movimentos da câmara nas suas criações de vídeo. Pode controlar o movimento da câmara em várias direções, incluindo movimento horizontal/vertical, panorâmica, inclinação, zoom e rotação.
Aplicar estilos a vídeos
Runway Gen-2 oferece uma vasta gama de estilos que pode aplicar aos vídeos gerados, oferecendo-lhes uma estética única e atraente. Oferece mais de 30 estilos predefinidos à sua escolha, incluindo cinematográfico, anime, isométrico e muito mais. Pode até criar os seus próprios estilos personalizados para aplicar aos vídeos.
Sincronização labial
A funcionalidade Lip Sync da Runway é uma ferramenta inovadora dentro da plataforma Gen-2 que permite aos utilizadores criar vídeos em que o rosto interno parece falar em sincronia com um clipe de áudio ou dizendo um guião. Esta funcionalidade é particularmente útil para criar animações de fala realistas.
Imagem original | Texto de fala | Saída de vídeo sincronizado com lábios |
Abrace a busca da compreensão, alimente o fogo da curiosidade. Aprender é a viagem, o conhecimento é o destino. |
Runway Gen-2 vs Gen-3 Alpha vs Gen-3 Alpha Turbo
Funcionalidades | Gen-2 | Gen-3 Alpha | Gen-3 Alpha Turbo |
Duração do vídeo | 4s | 5/10s | |
Resolução de vídeo | 1408 × 768px (upscale desativado) 2816 × 1536px (upscale ativado) | 1280x768px | 1280x768px 768x1280px |
Texto para vídeo | |||
Imagem para vídeo | |||
Vídeo para vídeo | |||
Pincel de movimento | |||
Controle de câmara | |||
Estilos personalizados | |||
Sincronização labial | |||
Ato Um |
Críticas de Runway no Reddit
Alguns utilizadores compararam o Runway Gen-2 a um dos seus concorrentes em termos de imagem para vídeo. E o Runway Gen-2 pode produzir melhores resultados. Leia mais >>
E a Gen-2 tem políticas muito rigorosas para evitar abusos contra crianças. Alguns utilizadores tentaram fazer o upload de imagens contendo crianças para a Gen-2 para animação e obter aviso instantâneo. Leia mais >>
Críticas em vídeo da Runway Gen-2
Perguntas frequentes
O RunwayML Gen-2 é gratuito?
O Runway oferece um plano gratuito para os seus utilizadores experimentarem as funcionalidades do Gen-2. Este plano vem com créditos e restrições limitados, como marcas de água não removíveis em cada saída de vídeo. Para mais recursos e utilização, pode subscrever um dos seus planos de subscrição pagos.
Qual a diferença entre a Runway Gen-1 e Gen-2?
O Runway Gen-2 representa uma atualização substancial em relação ao Gen-1, introduzindo a capacidade de gerar vídeos a partir do zero utilizando apenas prompts de texto ou imagens, o que não era possível na versão anterior. Possui vários modos de criação de vídeo, incluindo texto para vídeo e imagem para vídeo, e oferece saídas de alta definição com realismo melhorado e movimentos mais suaves.
Qual a diferença entre Runway Gen-3 e Gen-2?
Runway Gen-3 avança em relação ao Gen-2 , oferecendo uma geração de vídeo de alta fidelidade com uma velocidade notável. Gen-3 permite a geração de movimentos mais realistas e ações complexas. Também oferece recursos mais avançados, como a geração de vídeo para vídeo e o Act-One.
Quais são as melhores práticas de criação de prompts para o Runway Gen-2?
As melhores práticas de escrita de prompts para a Gen-2 incluem o uso da estrutura [assunto] no estilo de [estilo ou estética], a incorporação de verbos para melhorar a ação e o movimento nos seus prompts e o uso de terminologia relacionada com a câmara para orientar o estilo visual.
Como utilizar o pincel de movimento do Gen-2?
Temos um guia detalhado sobre como utilizar o Motion Brush no Runway . Leia o artigo e veja se o pode ajudar a compreender melhor este recurso.