img

Synchronisation labiale sur la Runway

Runway Lip Sync est une fonctionnalité de Runway qui permet de synchroniser les paroles de vos clips audio ou scripts avec les expressions faciales de vos personnages. Cela vous permet de créer des vidéos IA réalistes avec des personnages en train de parler ou de converser. Similaire à la fonctionnalité Act One de Runway , cette dernière est plus puissante et destinée aux cas d'usage avancés.

Image en Vidéo

Cliquez pour ajouter une image

Principales caractéristiques de Runway Lip Sync

Synthèse vocale

Runway Lip Sync prend en charge les scripts de synthèse vocale contenant jusqu'à 600 caractères par dialogue entre interlocuteurs. Cela vous donne une liberté totale pour écrire des dialogues de personnages uniques qui correspondent à vos besoins et exigences précis.

synthèse vocale

Voici quelques exemples de vidéos de synthèse vocale synchronisées sur les lèvres :

Image Script de texte Sortie vidéo
synthèse vocale 1
J'espère que vous passez tous un bon moment aujourd'hui. C'est génial d'avoir cette chance de se connecter.
synthèse vocale 2
Salut Jamie ! Tu as des projets pour le week-end ?

Synchroniser avec l'audio téléchargé

Avec Runway Lip Sync, vous pouvez vous enregistrer ou enregistrer d'autres personnes et télécharger le fichier audio existant pour l'utiliser comme dialogue entre les personnages. L'outil permet d'enregistrer jusqu'à 40 secondes de discours avec la possibilité de prévisualiser le son avant le résultat final.

synchroniser

Scènes à visages multiples

Vous pouvez utiliser Runway Lip Sync pour créer des scènes de dialogue pour plusieurs personnages, ce qui facilite la création de scènes complexes. L'outil vous permet de télécharger jusqu'à 10 dialogues par vidéo, ce qui vous donne beaucoup de marge de manœuvre créative.

visage multiple
Image Script de texte Sortie vidéo
multi-faces 1
Personnage 1 :

Aujourd’hui, nous présenterons une nouvelle initiative conçue pour améliorer notre engagement communautaire.

Personnage 2 :

Cette initiative n’est pas seulement un projet ; c’est une opportunité pour nous tous de collaborer et d’innover ensemble.

Personnage 3 :

Nous avons soigneusement analysé les besoins de notre communauté et élaboré un plan qui répond efficacement à ces besoins.

Personnage 4 :

Notre objectif est de créer une plateforme qui favorise la communication et la connexion entre toutes les personnes impliquées.

Styliser le discours

Vous pouvez accéder à plusieurs modèles de voix IA personnalisés avec Runway Lip Sync, chacun offrant différentes nuances de langage parmi lesquelles choisir. Vous pouvez même sélectionner des voix masculines ou féminines dans différentes humeurs et contextes tels que la méditation, la narration, la conversation, etc.

styliser

Vidéos YouTube sur le lip sync de Runway

De quoi parlent les gens sur Runway Lip Sync sur Reddit

Plusieurs utilisateurs ont déjà implémenté Runway Lip Sync avec des résultats assez impressionnants mais il est clair que certaines améliorations sont encore nécessaires de la part de l'outil.

Commentaire
par u/Paul-Montreal à partir de la discussion
dans la piste ml

L’un des principaux problèmes rencontrés par certains utilisateurs est de faire fonctionner Runway Lip Sync avec des personnages qui ne sont pas humains.

Commentaire
par u/dietpapita à partir de la discussion
dans la piste ml

D'autres utilisateurs ont contourné ce problème en utilisant la vidéo à vidéo de Runway pour tenter de convertir les vidéos de personnages en action en direct pour de meilleurs résultats.

Commentaire
par u/Initial_Simple780 à partir de la discussion
dans runwayml

De quoi les gens parlent sur Runway Lip Sync sur X

Questions fréquentes

Est-ce que Runway Lip Sync est gratuit ?

Vous pouvez accéder gratuitement à Runway Lip Sync en utilisant le forfait de base. Cependant, le nombre de générations que vous pouvez créer sera limité. Si vous souhaitez continuer à utiliser l'outil, vous devrez éventuellement souscrire à un forfait payant.

Combien de personnages Runway Lip Sync peut-il animer par scène ?

Vous pouvez utiliser Runway Lip Sync pour ajouter des dialogues vocaux pour un maximum de 10 intervenants/dialogues différents par scène. Vous pouvez également utiliser différents modèles de voix IA pour chacun d'eux, ce qui vous aide à créer des séquences visuelles interactives avec une narration plus approfondie. Découvrez-en plus sur l'utilisation de Runway Lip Sync ici.

Quelles sont les limites de Runway Lip Sync ?

Runway Lip Sync fonctionne mieux avec des gros plans de visages humains tournés vers l'avant en direction de la caméra. L'outil ne prend généralement pas en charge les visages d'animaux ou de dessins animés, mais il peut parfois fonctionner. De plus, il ne doit pas y avoir de mouvement significatif de la bouche, de la caméra, du corps ou de la tête.

Quels formats vidéo sont pris en charge par Runway Lip Sync ?

Vous pouvez importer une large gamme de formats vidéo populaires tels que MP4, MOV, 3GP, MKV et autres. Cependant, en ce qui concerne l'exportation, vous devrez vérifier votre abonnement. Par exemple, les utilisateurs Basic et Standard ne peuvent exporter des vidéos qu'au format MP4.

Combien coûte l'utilisation de Runway Lip Sync ?

Runway facturera 5 crédits par seconde de sortie vidéo lors de l'utilisation de l'outil Lip Sync. Gardez à l'esprit qu'il prend en charge jusqu'à un maximum de 40 secondes par dialogue avec jusqu'à 10 dialogues autorisés pour chaque scène visuelle.

En plus de la synchronisation labiale, quelles autres fonctionnalités Runway propose-t-il ?

Runway offre plusieurs fonctionnalités de génération, notamment la conversion d'images en vidéos. Depuis que Pollo AI a intégré Runway, vous pouvez désormais créer des vidéos à partir d'images grâce à l'IA Pollo AI image-vidéo avec le même modèle Runway !

Essayez Runway sur Pollo AI maintenant !

Essayez Runway sur Pollo AI maintenant !

En tant que générateur de vidéo IA tout-en-un, Pollo AI vous permet d'essayer les capacités de Runway sans tracas.