Runway Gen-3 Alpha

Saída de vídeo superior

O modelo Gen-3 Alpha da Runway foi extensivamente treinado utilizando conteúdo baseado em vídeo e imagem para se tornar mais inteligente do que a versão anterior. Oferece três formas de geração de IA: texto para vídeo, imagem para vídeo e texto para imagem. E traz funcionalidades interessantes, como o Motion Brush, os controlos avançados da câmara e o modo realizador.

Permite aos utilizadores criar vídeos altamente detalhados com mudanças de cena complexas, uma vasta gama de opções cinematográficas e direções de arte detalhadas.

Imediato	Imagem de entrada	Saída de vídeo
A alta velocidade, ângulo dinâmico, a câmara capta um saco de plástico a flutuar no ar sobre uma cena arenosa. A bolsa é semitransparente e flutua para cima e para baixo na brisa, mas permanece claramente visível e focada durante toda a cena.	Nenhum
As mãos enluvadas puxam para esticar o rosto feito de um material de pastilha elástica
As anémonas-do-mar balançam e fluem naturalmente na água. a câmara permanece parada.

Act One Um

O Act One Um é uma das adições mais entusiasmantes à versão Gen-3 Alpha de Runway. É uma ferramenta de animação de personagens, cujo objetivo é produzir os movimentos faciais, padrões de fala e expressões mais realistas e autênticas nos seres humanos.

Com isto, os utilizadores podem criar as suas próprias performances de personagens que se parecem muito com as reais, e funciona em vários estilos, desde vídeos fotorrealistas de pessoas a conversar até cenas animadas fofas ao estilo dos grandes estúdios de animação, como a Disney e a Pixar.

Funciona tão bem porque a ferramenta foi treinada com grandes quantidades de dados de animação facial e mocap, abrindo muitas novas oportunidades para a expressão criativa.

Desempenho de condução	Saída de vídeo

Estender vídeo

Com o Gen-3 Alpha, pode tornar os seus vídeos gerados por IA mais longos do que antes, adicionando novas secções de conteúdo em incrementos de 5 a 10 segundos. E pode estender um único vídeo até três vezes para o tornar muito mais longo do que era originalmente (até um máximo de 40 segundos extra).

O processo de extensão de vídeos também é rápido e fácil – só tem de selecionar a ferramenta "Estender" no menu "Ações" junto ao seu vídeo.

Por predefinição, a ferramenta irá adicionar novo conteúdo após o fotograma final do seu vídeo original. E pode introduzir o seu próprio aviso de texto para dizer ao modelo de IA o que incluir na extensão, descrevendo a cena, o movimento da câmara e outros fatores.

O Gen-3 Alpha também permite escolher entre adições de cinco ou 10 segundos, conforme desejado.

Saída de alta fidelidade

O Gen-3 Alpha da Runway eleva a consistência e a saída de alta fidelidade a novos patamares quando comparado com versões anteriores, como o Gen-2.

É capaz de criar vídeos retratando os movimentos mais autênticos e realistas, incluindo caminhadas, corridas, trotes e saltos. Cada movimento flui de forma organizada e realista, sem falhas estranhas ou outras obscuridades de IA, mantendo o público envolvido e imerso.

Além disso, o novo modelo é capaz de manter movimentos e visuais consistentes de fotograma a fotograma. Isto deve-se à sua compreensão superior de prompts e algoritmos melhores do que a versão anterior Gen-2 .

Tudo isto é também entregue mais rapidamente do que nunca – o Gen-3 Alpha é 2x mais rápido que o Gen-2.

Controlos Temporais Avançados

O modelo Gen-3 Alpha da Runway foi treinado para compreender instruções complexas e em camadas que envolvem várias cenas e ideias temporais, todas elas reunidas. Por isso, ele é muito bom a compreender prompts que descrevem cenas ou visuais que sofrem várias mudanças ou transições.

Para o utilizador final, isto significa que o Gen-3 Alpha faz um trabalho eficiente ao gerar transições suaves e fluidas entre cenas ou segmentos de cada vídeo. Também lhe dá mais controlo sobre os fotogramas-chave, para que possa definir momentos específicos do vídeo em que ocorrem coisas específicas ou elementos aparecem.

Com tanto controlo, os utilizadores podem fazer exatamente os vídeos que desejam, sem terem de fazer concessões.

Pessoas realistas

A Gen-3 Alpha da Runway foi treinada para fazer com que os seus sujeitos humanos pareçam o mais realistas possível. Por outras palavras, é muito difícil diferenciar os humanos nestes vídeos de IA das pessoas reais.

Quer estejam a falar, a fazer expressões faciais ou a realizar diversas atividades, como correr e saltar, as pessoas nestes vídeos são altamente autênticas. Isto dá aos utilizadores muitas possibilidades em termos de contar histórias e criar conteúdo orientado para o ser humano.

Áudio de sincronização labial

A funcionalidade "Sincronização labial" permite-lhe sincronizar uma faixa de áudio ou de fala com movimentos labiais realistas das suas personagens e objetos.

Pode digitar o seu próprio script para os seus personagens de IA dizerem, gravar a sua própria voz diretamente no Runway ou enviar um ficheiro de áudio. O Lip Sync irá então sincronizar com os movimentos da boca da personagem, para que pareça que estão realmente a transmitir esse áudio.

Existem também várias opções de voz para configurar e escolher quando utiliza o Lip Sync.

Geração de vídeo para vídeo

Basta carregar (ou gerar) um vídeo para utilizar como linha de base ou ponto de referência para o modelo de IA. Permitirá transformar ou alterar esse vídeo de várias formas, como transformar um vídeo realista num animado ou vice-versa.

Entrada de vídeo	Prompt de texto	Saída de vídeo
	Meio-tom 3D estilo CMYK. ponto de impressão de meio-tom. banda desenhada. cores vibrantes em camadas de azul ciano, amarelo, roxo magenta e pontos circulares pretos.

Melhores prompts para utilizar o Runway Gen-3 Alpha

Para tirar o máximo partido do Gen-3 Alpha, precisa de utilizar os melhores tipos de prompts. O próprio Runway incentiva os utilizadores a manterem-se fiéis ao "[movimento da câmara]: [estabelecer a cena]. [detalhes adicionais]". fórmula.

Por exemplo, pode colocar um aviso como "panorâmica horizontal lenta, uma jovem caminha pelo deserto, depois começa a chover".

Quanto mais detalhes colocar nos seus prompts, mais específicos e personalizados serão os resultados. Assim, se tem uma certa visão em mente de como quer que o seu vídeo fique, é melhor ser detalhado.

Podemos aplicar isto ao exemplo anterior, para obter algo como:

"A câmara gira lentamente da esquerda para a direita por um deserto de areia dourada. Uma mulher na casa dos 20 anos caminha lentamente pela cena. Está a usar um vestido floral. Olha para cima enquanto a chuva começa a cair das nuvens cinzentas acima."

Aqui estão algumas dicas bónus para tornar os seus prompts os melhores possíveis:

• Forneça o máximo de detalhes possível, sem exagerar. O Gen-3 Alpha funciona melhor com avisos de "ponto ideal" que não são excessivamente simples ou complexos.
• Aprenda sobre os termos para movimentos de câmara e tipos de plano, para que possa dar à ferramenta instruções precisas sobre o enquadramento e os ângulos de câmara.
• Utilize o mesmo estilo nos seus avisos ao criar cenas semelhantes ou subsequentes para que mantenham um nível de consistência.
• Experimente brincar com os avisos predefinidos personalizados do Runway e guarde os seus favoritos para reutilizar no futuro.

Runway Gen-2 vs Gen-3 Alpha vs Gen-3 Alpha Turbo

Avaliações do Reddit sobre Gen-3 Alpha

Então, o que pensam os utilizadores em geral sobre o Gen-3 Alpha da Runway? Bem, neste momento, as opiniões sobre a ferramenta são algo confusas.

Alguns utilizadores alegaram que continuarão a utilizar a Gen-2 por enquanto, uma vez que a Gen-3 está apenas na fase "Alfa" de desenvolvimento e ainda precisa de algumas melhorias antes de atingir o seu potencial.

Comentar
por u/West_Persimmon_6210 da discussão
na passerelleml

Outros queixaram-se do elevado custo de utilização do Gen-3 Alpha, mas alguns ainda elogiaram a tecnologia e as principais características que introduziu.

Comentar
por u/Puzzled-Emphasis1116 da discussão
na passerelleml