Runway Gen-3 Alpha

Saída de vídeo superior

O modelo Gen-3 Alpha da Runway foi extensivamente treinado utilizando conteúdo baseado em vídeo e imagem para se tornar mais inteligente do que a versão anterior. Oferece três formas de geração de IA: Texto para Vídeo, Imagem para Vídeo e Texto para Imagem. E traz funcionalidades interessantes para a mesa, como o Motion Brush, os controlos avançados da câmara e o modo realizador.

Permite aos utilizadores criar vídeos altamente detalhados com mudanças de cena complexas, uma vasta gama de opções cinematográficas e instruções de arte detalhadas.

Imediato	Imagem de entrada	Vídeo de saída
Ângulo dinâmico e de alta velocidade, a câmara bloqueia num saco de plástico flutuando no ar numa cena arenosa. A bolsa é semitransparente e flutua para cima e para baixo com a brisa, mas permanece claramente visível e focada durante toda a cena.	Nenhum
As mãos enluvadas puxam para esticar o rosto feito de um material de pastilha elástica
As anémonas do mar balançam e fluem naturalmente na água. a câmara permanece parada.

Ato Um

Act One é uma das adições mais entusiasmantes à versão Gen-3 Alpha da Runway. É uma ferramenta de animação de personagens, que visa produzir movimentos faciais, padrões de fala e expressões mais realistas e autênticas nos seres humanos.

Com isto, os utilizadores podem criar as suas próprias performances de personagens que se parecem com as reais, e funciona em vários estilos, desde vídeos fotorrealistas de pessoas a conversar até cenas animadas fofas nos estilos de grandes estúdios de animação, como a Disney e a Pixar.

Funciona tão bem porque a ferramenta foi treinada em resmas de dados de animação facial e mocap, abrindo muitas novas oportunidades para a expressão criativa.

Desempenho de condução	Vídeo de saída

Estender vídeo

Com o Gen-3 Alpha, pode tornar os seus vídeos gerados por IA mais longos do que antes, adicionando novas secções de conteúdo em incrementos de 5 a 10 segundos. E pode estender um único vídeo até três vezes para o tornar muito mais longo do que era originalmente (até um máximo de 40 segundos extra).

O processo de extensão de vídeos também é rápido e fácil – basta selecionar a ferramenta “Estender” no menu “Ações” junto ao seu vídeo.

Por defeito, a ferramenta irá adicionar novo conteúdo seguindo o quadro final do seu vídeo original. E pode introduzir o seu próprio aviso de texto para dizer ao modelo de IA o que incluir na extensão, descrevendo a cena, o movimento da câmara e outros fatores.

O Gen-3 Alpha também permite escolher entre adições de cinco ou 10 segundos, conforme desejado.

Saída de alta fidelidade

O Gen-3 Alpha da Runway eleva a consistência e a saída de alta fidelidade a novos níveis quando comparado com versões anteriores, como o Gen-2.

É capaz de criar vídeos que retratam os movimentos mais autênticos e realistas, incluindo caminhar, correr, correr e saltar. Cada movimento flui de forma organizada e realista, sem falhas estranhas ou outras obscuridades da IA, mantendo o público envolvido e imerso.

Além do mais, o novo modelo é capaz de manter movimentos e visuais consistentes frame a frame. Isto deve-se à sua compreensão superior de prompts e algoritmos melhores do que a versão anterior da Gen-2 .

Tudo isto também é entregue mais rapidamente do que nunca – o Gen-3 Alpha é 2x mais rápido que o Gen-2.

Controlos temporais avançados

O modelo Gen-3 Alpha da Runway foi treinado para compreender instruções complexas e em camadas que envolvem múltiplas cenas e ideias temporais, todas agrupadas. Por causa disto, é muito bom para compreender instruções que descrevem cenas ou imagens que sofrem várias mudanças ou transições.

Para o utilizador final, isto significa que o Gen-3 Alpha faz um trabalho eficiente ao gerar transições suaves e fluidas entre cenas ou segmentos de cada vídeo. Também oferece mais controlo sobre o enquadramento-chave, para que possa definir especificamente momentos precisos do vídeo onde ocorrem coisas específicas ou elementos aparecem.

Com tanto controlo, os utilizadores podem fazer exatamente os vídeos que desejam, sem se comprometerem.

Pessoas realistas

O Gen-3 Alpha da Runway foi treinado para fazer com que os seus sujeitos humanos parecessem o mais realistas possível. Por outras palavras, é muito difícil distinguir os humanos nestes vídeos de IA das pessoas reais.

Quer estejam a conversar, a fazer expressões faciais ou a realizar diversas atividades como correr e saltar, as pessoas nestes vídeos são altamente autênticas. Isto oferece aos utilizadores muitas possibilidades em termos de contar histórias e criar conteúdo orientado para o ser humano.

Áudio com sincronização labial

A funcionalidade "Lip Sync" permite sincronizar uma faixa de áudio ou de fala com movimentos labiais realistas das suas personagens e assuntos.

Pode digitar o seu próprio script para as suas personagens de IA dizerem, gravar a sua própria voz diretamente no Runway ou fazer o upload de um ficheiro áudio. O Lip Sync irá então sincronizá-lo com os movimentos da boca da personagem, para que pareça realmente que estão a transmitir esse áudio.

Existem também várias opções de voz para configurar e escolher ao utilizar o Lip Sync.

Geração de vídeo para vídeo

Basta fazer o upload (ou gerar) um vídeo para utilizar como linha de base ou ponto de referência para o modelo de IA. Permitirá então transformar ou alterar esse vídeo de várias formas, como por exemplo transformar um vídeo realista num animado ou vice-versa.

Vídeo de entrada	Pedido de texto	Vídeo de saída
	Estilo CMYK de meio-tom 3D. ponto de impressão de meio-tom. banda desenhada. cores vibrantes em camadas de pontos circulares azul ciano, amarelo, roxo magenta e preto.

Melhores instruções para utilizar o Runway Gen-3 Alpha

Para tirar o máximo partido do Gen-3 Alpha, precisa de utilizar os melhores tipos de prompts. A própria Runway incentiva os utilizadores a seguirem o "[movimento da câmara]: [estabelecer a cena]. [detalhes adicionais]." fórmula.

Por exemplo, pode colocar uma mensagem como "panela horizontal lenta, uma jovem caminha pelo deserto e começa a chover".

Quanto mais detalhes colocar nos seus prompts, mais resultados específicos e personalizados obterá. Portanto, se tiver uma certa visão de como quer que o seu vídeo fique, é melhor ser detalhado.

Podemos aplicar isto ao exemplo anterior, para obter algo como:

"A câmara gira lentamente da esquerda para a direita através de um deserto de areia dourada. Uma mulher de cerca de 20 anos caminha lentamente pela cena. Está a usar um vestido floral. Olha para cima quando a chuva começa a cair das nuvens cinzentas acima."

Aqui estão algumas dicas extra para tornar as suas solicitações as melhores possíveis:

• Forneça o máximo de detalhes possível, sem exagerar. O Gen-3 Alpha funciona melhor com avisos de "ponto ideal" que não são excessivamente simples ou complexos.
• Aprenda sobre os termos para os movimentos da câmara e os tipos de plano, para que possa fornecer à ferramenta instruções precisas para o enquadramento e os ângulos da câmara.
• Utilize o mesmo estilo nos seus avisos ao criar cenas semelhantes ou subsequentes para que mantenham um nível de consistência.
• Experimente brincar com os avisos predefinidos personalizados da Runway e guarde os seus favoritos para os reutilizar no futuro.

Runway Gen-2 vs Gen-3 Alpha vs Gen-3 Alpha Turbo

Críticas do Reddit sobre Gen-3 Alpha

Então, o que pensam os utilizadores em geral sobre o Gen-3 Alpha da Runway? Bem, neste momento, as opiniões sobre a ferramenta são algo confusas.

Alguns utilizadores afirmaram que continuarão a utilizar o Gen-2 por enquanto, uma vez que o Gen-3 está apenas na fase “Alfa” de desenvolvimento e ainda necessita de algumas melhorias antes de atingir o seu potencial.

Comentar
por u/West_Persimmon_6210 da discussão
na pistaml

Outros queixaram-se do elevado custo da utilização do Gen-3 Alpha, mas alguns ainda elogiaram a tecnologia e as principais características que introduziu.

Comentar
por u/Puzzled-Emphasis1116 da discussão
na pista ml

Críticas de vídeo