Runway Lip Sync
Runway Lip Sync er en funksjon i Runway som kan synkronisere talene til lydklippene eller tekstskriptene deres for å matche alle karakterers ansiktsuttrykk. Dette lar deg lage realistiske og engasjerende visuelle sekvenser med karakterer som snakker eller snakker. Det ligner på Runways Act One- funksjon, men sistnevnte er kraftigere og for avansert bruk.
Nøkkelfunksjoner ved Runway Lip Sync
- Tekst-til-tale: Du kan legge inn skript med høyttalerdialog for tegn å bruke.
- Synkroniser med lyd: Last opp innspilte dialogfiler på opptil 40 sekunder.
- Scener med flere ansikter: Velg opptil 10 flere tegn for separate dialoger.
- Stiliser tale: Få tilgang til tilpassede AI-stemmemodeller for å oppnå forskjellige lydresultater.
Tekst-til-tale
Runway Lip Sync støtter tekst-til-tale-skript på opptil 600 tegn per høyttalerdialog. Dette gir deg full frihet til å skrive ut unike karakterdialoger som passer dine presise behov og krav.
Følgende er noen eksempler på leppesynkroniserte tekst-til-tale-videoer:
| Bilde | Tekstmanus | Utgang video |
 | Jeg håper dere alle har det fantastisk i dag. Det er fantastisk å ha denne sjansen til å koble til. | |
 | Hei Jamie! Har du noen planer for helgen? |
Synkroniser med opplastet lyd
Med Runway Lip Sync kan du ta opp deg selv eller andre og laste opp den eksisterende lydfilen som skal brukes som karakterdialog. Verktøyet tillater opptil maksimalt 40 sekunders tale med mulighet for å forhåndsvise hvordan det høres ut før det endelige resultatet.
Scener med flere ansikter
Du kan bruke Runway Lip Sync til å lage dialogscener for flere karakterer, noe som gjør det enkelt å lage komplekse scener med letthet. Verktøyet lar deg laste opp opptil 10 dialoger per video, noe som gir deg mye kreativt rom å jobbe med.
| Bilde | Tekstmanus | Utgang video |
 | Tegn 1: I dag introduserer vi et nytt initiativ designet for å øke samfunnsengasjementet vårt. Karakter 2: Dette initiativet er ikke bare et prosjekt; det er en mulighet for oss alle til å samarbeide og innovere sammen. Karakter 3: Vi har nøye analysert behovene til samfunnet vårt og utviklet en plan som effektivt dekker disse behovene. Karakter 4: Målet vårt er å skape en plattform som fremmer kommunikasjon og forbindelse mellom alle involverte. |
Stiliser tale
Du kan få tilgang til flere tilpassede AI-stemmemodeller med Runway Lip Sync, hver med forskjellige språknyanser å velge mellom. Du kan til og med velge mannlige eller kvinnelige stemmer i forskjellige stemninger og innstillinger som meditasjon, fortelling, samtale, etc.
YouTube-videoer om Runway Lip Sync
Hva folk snakker om Runway Lip Sync på Reddit
Flere brukere har allerede implementert Runway Lip Sync med ganske imponerende resultater, men det er klart at det fortsatt kreves en viss forbedring fra verktøyet.
Kommentar
av u/Paul-Montreal fra diskusjon
i rullebaneml
Et av hovedproblemene noen brukere har slitt med er å få Runway Lip Sync til å fungere med karakterer som ikke er mennesker.
Kommentar
av u/dietpapita fra diskusjon
i rullebaneml
Andre brukere jobbet rundt dette problemet ved å bruke Runways video-til-video i et forsøk på å konvertere karaktervideoene til live action for bedre resultater.
Kommentar
av u/Initial_Simple780 fra diskusjon
i rullebaneml
Hva folk snakker om Runway Lip Sync på X
#Runway Gen-1 + Lip Sync (tilgjengelig nå for alle!)
— 🍥 Timmy 🍥 (@IXITimmyIXI) 22. mars 2024
Et eksperiment 🧵
Jeg ville se hvor godt Lip Sync ville fungere på et stilisert Gen-1-klipp. Så jeg lastet opp en video av grei kvalitet med motivet mitt godt synlig.
Dette var den første inngangsvideoen, og Lip Sync ville ikke... pic.twitter.com/faJ0nAmWhS
📼 Realistisk leppesynkronisering har ankommet Runway og det er SINNSYKT. 🤯
— Javaid Shah (@JvShah124) 8. desember 2024
Dette er faktisk en oppdatering av Act-One-funksjonen, men du kan laste opp hvilken som helst video, ikke bare de som genereres i tjenesten.
Slik fungerer det:
🟡 Vi laster opp en video av deg som snakker til kameraet (eller til og med synger).… pic.twitter.com/Il6CsVrgz0
Spillet er over! Runway droppet nettopp Act One, og tok lip-sync AI til neste nivå med vanvittig kvalitet og en sømløs arbeidsflyt. Det har aldri vært så enkelt å bringe karakterer til live.
— Ben Nash (@bennash) 25. oktober 2024
Her er en kort scene kalt "Rise or Fall".
Jeg skal forklare hvordan du lager dette nedenfor. @runwayml pic.twitter.com/KCAuXbNeIr
Spillet er over! Runway droppet nettopp Act One, og tok lip-sync AI til neste nivå med vanvittig kvalitet og en sømløs arbeidsflyt. Det har aldri vært så enkelt å bringe karakterer til live.
— Ben Nash (@bennash) 25. oktober 2024
Her er en kort scene kalt "Rise or Fall".
Jeg skal forklare hvordan du lager dette nedenfor. @runwayml pic.twitter.com/KCAuXbNeIr
Jeg ønsket å prøve Runway og leppesynkroniseringen deres, så jeg laget dette MJ-bildet og fortalte denne korte selv. Jeg er ikke så opptatt av AI-stemmer.
— ZOOT (@LittleTinRobot) 30. juni 2024
Interessant prosess. #runwayml #midjourney #scifi pic.twitter.com/xlmzHkQF0N
Jeg ønsket å prøve Runway og leppesynkroniseringen deres, så jeg laget dette MJ-bildet og fortalte denne korte selv. Jeg er ikke så opptatt av AI-stemmer.
— ZOOT (@LittleTinRobot) 30. juni 2024
Interessant prosess. #runwayml #midjourney #scifi pic.twitter.com/xlmzHkQF0N
Jeg ønsket å prøve Runway og leppesynkroniseringen deres, så jeg laget dette MJ-bildet og fortalte denne korte selv. Jeg er ikke så opptatt av AI-stemmer.
— ZOOT (@LittleTinRobot) 30. juni 2024
Interessant prosess. #runwayml #midjourney #scifi pic.twitter.com/xlmzHkQF0N
Wow: #runway lip sync, genererer nå dialoger for mer enn én karakter. Fantastisk :) Jannet og Mike forteller oss mer om det. pic.twitter.com/LTQNEuicoq
— Cristián Parodi (@cristian_parodi) 9. juli 2024
Oppdag Runways andre funksjoner
Nyttige artikler om Runway Lip Sync
Lær hvordan du bruker lip sync med Runway, og oppdag flere nyttige artikler!
Vanlige spørsmål
Er Runway Lip Sync gratis?
Du kan få tilgang til Runway Lip Sync uten kostnad ved å bruke den grunnleggende planen. Men antallet generasjoner du kan lage vil være begrenset. Hvis du vil fortsette å bruke verktøyet, må du til slutt abonnere på en betalt plan.
Hvor mange karakterer kan Runway Lip Sync animere per scene?
Du kan bruke Runway Lip Sync til å legge til taledialog for opptil maksimalt 10 forskjellige høyttalere/dialoger per scene. Du kan også bruke forskjellige AI-stemmemodeller for hver enkelt, noe som hjelper deg med å lage interaktive visuelle sekvenser med dypere historiefortelling. Lær mer om hvordan du bruker Runway Lip Sync her.
Hvilke begrensninger har Runway Lip Sync?
Runway Lip Sync fungerer best med nærbilder av menneskeansikter som vender fremover i retning av kameraet. Verktøyet støtter vanligvis ikke dyre- eller tegneserieansikter, men det kan fungere til tider. Dessuten bør det ikke være noen betydelige bevegelser i munnen, kameraet, kroppen eller hodet.
Hvilke videoformater støtter Runway Lip Sync?
Du kan importere et bredt spekter av populære videoformater som MP4, MOV, 3GP, MKV og andre. Når det gjelder eksport, må du imidlertid sjekke abonnementet ditt. For eksempel kan Basic og Standard-brukere kun eksportere videoer i MP4-format.
Hvor mye koster det å bruke Runway Lip Sync?
Runway vil belaste 5 studiepoeng per sekund med videoutgang når du bruker Lip Sync-verktøyet. Husk at den støtter opptil maksimalt 40 sekunder per dialog med opptil 10 dialoger tillatt for hver visuell scene.
Prøv Runway på Pollo AI nå!
Som en alt-i-ett AI-videogenerator lar Pollo AI deg prøve funksjonene til Runway uten problemer.