A funcionalidade Lip Sync é uma adição útil ao popular modelo de geração de vídeo Runway AI . É utilizado para sincronizar movimentos labiais de personagens ou sujeitos humanos em vídeos de IA com áudio de fala e oferece muita utilidade. Mas, por ser uma funcionalidade bastante nova, muitos utilizadores não têm a certeza de como funciona. Este guia explora como utilizar a funcionalidade Lip Sync da Runway de forma direta.
O que é a sincronização labial da Runway AI?
O Lip Sync é, como o nome indica, uma funcionalidade para sincronizar o áudio da fala com os movimentos labiais das personagens nos seus vídeos de IA. Por outras palavras, pode utilizá-lo para fazer vídeos de IA em que as personagens movem as suas bocas e rostos de forma realista para corresponder a um guião de texto que pode escrever nos seus avisos ou enviar como um ficheiro de áudio separado.
Os usos deste são de longo alcance. Os criadores podem utilizar o Lip Sync para, por exemplo, criar cenas realistas de personagens a dialogar entre si, a ler um discurso ou a fazer uma declaração. Isto abre novas oportunidades em termos do tipo de conteúdo – como conteúdo de filmes e estilo de TV – que poderia teoricamente criar com Runway AI.
Como utilizar a sincronização labial na Runway AI
Agora que já sabe do que se trata a funcionalidade Lip Sync, vamos ver como utilizá-la. Aqui está um guia passo a passo simples, completo com capturas de ecrã, para lhe mostrar exatamente como pode utilizar o Lip Sync para fazer vídeos de IA com áudio perfeitamente sincronizado.
Passo 1. Aceda à ferramenta Lip Sync
O primeiro passo é simples. Se quiser utilizar a ferramenta Lip Sync, precisa de clicar e selecionar "Lip Sync Video" na lista de "Ferramentas de IA da Runway", que pode encontrar no painel da Runway .
Passo 2. Adicionar um vídeo ou imagem
Em seguida, precisará de uma imagem ou vídeo para utilizar como base para a sua criação final. Pode arrastar e largar ou clicar para enviar um vídeo ou imagem em qualquer um dos formatos suportados. Se utilizar um vídeo, certifique-se de que a personagem que pretende ver a falar está presente logo no primeiro fotograma.
Passo 3. Selecione o seu alto-falante
Assim que a sua imagem ou vídeo for carregado no Runway, este tentará detetar automaticamente o rosto do seu altifalante. Na maioria das vezes, não deverá haver problemas em localizar a figura-chave na imagem, mas pode ser difícil se enviar uma imagem com várias pessoas ou figuras pouco claras. Se isto acontecer, pode clicar você mesmo na imagem e arrastar a caixa até à face do altifalante.
Passo 4. Escolha uma voz
Clique no ícone do microfone junto ao altifalante para selecionar uma voz para os mesmos. O Runway oferece várias opções de voz diferentes e pode visualizar cada uma delas premindo o pequeno botão “Play”. Assim, quando encontrar o que pretende, clique para o selecionar.
Passo 5. Insira o seu script ou carregue o seu áudio
Em seguida, precisa de dizer à ferramenta o que pretende que o orador diga. Tem duas opções para isso. Pode clicar na caixa de texto ao lado do orador e escrever o que pretende que ele diga. Ou pode fazer o upload de um ficheiro áudio que já contenha a gravação da fala que pretende ouvir no vídeo final.
Passo 6. (Opcional) Adicionar altifalantes adicionais
Esta é uma etapa opcional para situações em que pretende que várias pessoas falem no seu vídeo. Pode clicar no botão "Adicionar altifalante" na parte inferior da janela da sessão para adicionar cada um e, em seguida, clicar no ícone do perfil de cada altifalante para o combinar com um dos rostos detetados no seu vídeo. Em seguida, digite o seu guião ou carregue o áudio que pretende ouvir.
Passo 7. Clique no botão Gerar
Depois de adicionar todas as caixas de diálogo desejadas, basta premir o botão "Gerar" na parte inferior da página e aguardar um momento enquanto o Runway faz o seu vídeo. Pode então visualizá-lo, guardá-lo e partilhá-lo.
Além disso, note que também pode adicionar Lip Sync a vídeos gerados por IA feitos com todos os diferentes modelos Runway , como Gen-2, Gen-3 e Gen-3 Alpha Turbo. Só precisa de fazer o seu vídeo, clicar em “Ação” e depois em “Sincronização labial”.
Melhores práticas para usar a sincronização labial na Runway
A funcionalidade Lip Sync do Runway é útil e divertida de usar, mas não é perfeita. Se quiser obter os melhores resultados com esta funcionalidade, terá de seguir algumas práticas recomendadas, que são as seguintes:
- Se utilizar algum ficheiro de fala carregado, mantenha-o durante um máximo de 40 segundos.
- Coloque os seus personagens virados para a frente, em direção à câmara.
- Utilize apenas rostos humanos – os animais podem ser adicionados no futuro, mas ainda não funcionam.
- Coloque as cabeças e os ombros das suas personagens na cena, sem aumentar ou diminuir demasiado o zoom.
- Opte por estilos de personagens fotorrealistas, não animados ou de desenhos animados.
- Evite qualquer movimento excessivo do corpo, das mãos ou da câmara.
- Mantenha a iluminação consistente nos seus vídeos de IA.
- Evite cortes ou transições rápidas que interrompam o fluxo do áudio/fala.
- Certifique-se de que utiliza os tipos de ficheiros de áudio e vídeo suportados.
- Tente manter um personagem no enquadramento – isto funciona menos bem com vários rostos.
Experimente hoje mesmo o Lip Sync da Runway AI com o Pollo AI
Se quiser testar a funcionalidade Runway Lip Sync, pode fazê-lo de forma fácil e gratuita no Pollo AI! O Pollo AI é um gerador de vídeo de IA líder que dá acesso a uma variedade de modelos de geração de vídeo de IA, incluindo o Gen 2, Gen 3 Alpha e Turbo da Runway , Hailuo AI e Luma AI , além de outros. Oferece também uma gama de ferramentas e vantagens, como modelos para fazer vídeos de beijos com IA. Pode testá-los todos, gratuitamente e num só lugar com o Pollo AI.