Runway Gen-3 Alpha

Overlegen videoudgang

Runways Gen-3 Alpha model er blevet grundigt trænet ved at bruge både video- og billedbaseret indhold for at blive smartere end den tidligere version. Det tilbyder tre former for AI-generering: Tekst til video, billede til video og tekst til billede. Og det bringer spændende funktioner til bordet, såsom Motion Brush, Advanced Camera Controls og Director Mode.

Det giver brugerne mulighed for at skabe meget detaljerede videoer med komplekse sceneændringer, en bred vifte af filmiske valg og detaljerede kunstretninger.

Hurtig	Indtast billede	Output video
Højhastigheds, dynamisk vinkel, kameraet låser på en plastikpose, der flyder gennem luften hen over en sandet scene. Tasken er semi-transparent og svæver op og ned på vinden, men forbliver tydeligt synlig og i fokus gennem hele scenen.	Ingen
De behandskede hænder trækker for at strække ansigtet lavet af et tyggegummimateriale
Søanemonerne svajer og flyder naturligt i vandet. kameraet forbliver stille.

Act One

Act One er en af ​​de mest spændende tilføjelser til Gen-3 Alpha versionen af ​​Runway. Det er et karakteranimationsværktøj, der har til formål at producere de mest realistiske, autentiske ansigtsbevægelser , talemønstre og udtryk i menneskelige emner.

Med dette kan brugere skabe deres egne karakterpræstationer, der ligner den ægte vare, og det fungerer i forskellige stilarter, fra fotorealistiske videoer af folk, der taler til søde animerede scener i stilarter fra store animationsstudier, som Disney og Pixar.

Det fungerer så godt, fordi værktøjet blev trænet på masser af ansigtsanimationsdata og mocap, hvilket åbner masser af nye muligheder for kreative udtryk.

Kørepræstation	Output video

Udvid video

Med Gen-3 Alpha kan du gøre dine AI-genererede videoer længere end før ved at tilføje nye sektioner af indhold i intervaller på 5-10 sekunder. Og du kan forlænge en enkelt video op til tre gange for at gøre den meget længere, end den oprindeligt var (op til maks. 40 ekstra sekunder).

Processen med at udvide videoer er også hurtig og nem - du skal bare vælge "Udvid"-værktøjet i "Handlinger"-menuen ved siden af ​​din video.

Som standard tilføjer værktøjet nyt indhold efter det sidste billede af din originale video. Og du kan indtaste din egen tekstprompt for at fortælle AI-modellen, hvad der skal inkluderes i udvidelsen, og beskrive scenen, kamerabevægelsen og andre faktorer.

Gen-3 Alpha lader dig også vælge mellem fem sekunders eller 10 sekunders tilføjelser, alt efter ønske.

High-Fidelity-output

Runways Gen-3 Alpha tager konsistens og high-fidelity-output til nye niveauer sammenlignet med tidligere versioner, som Gen-2.

Det er i stand til at skabe videoer, der viser de mest autentiske, naturtro bevægelser, herunder gang, løb, jogging og hop. Hver bevægelse flyder pænt og realistisk uden mærkelige fejl eller andre AI-uklarheder, hvilket holder publikum engageret og fordybet.

Derudover er den nye model i stand til at opretholde ensartede bevægelser og billeder fra ramme til ramme. Dette er takket være dens overlegne forståelse af prompter og bedre algoritmer end den tidligere Gen-2 version.

Alt dette leveres også hurtigere end nogensinde – Gen-3 Alpha er 2x hurtigere end Gen-2.

Avanceret tidskontrol

Runways Gen-3 Alpha model er blevet trænet til at forstå komplekse, lagdelte prompter, der involverer flere scener og tidsmæssige ideer, alt sammen pakket ind. På grund af det er den meget god til at forstå prompter, der beskriver scener eller billeder, der gennemgår forskellige ændringer eller overgange.

For slutbrugeren betyder det, at Gen-3 Alpha gør et effektivt stykke arbejde med at generere jævne, flydende overgange mellem scener eller segmenter af hver video. Det giver dig også mere kontrol over key-framing, så du specifikt kan indstille præcise øjeblikke af videoen, hvor specifikke ting opstår eller elementer vises.

Med så meget kontrol kan brugerne lave præcis de videoer, de ønsker, uden at skulle gå på kompromis.

Livlige mennesker

Runways Gen-3 Alpha er blevet trænet til at få sine menneskelige motiver til at se så realistiske ud, som de overhovedet kan. Med andre ord er mennesker i disse AI-videoer meget svære at skelne fra rigtige mennesker.

Uanset om de taler, laver ansigtsudtryk eller udfører forskellige aktiviteter som at løbe og hoppe, er personerne i disse videoer yderst autentiske. Dette giver brugerne en masse muligheder i forhold til at fortælle historier og lave menneskeorienteret indhold.

Læbesynkroniseringslyd

Funktionen "Lip Sync" lader dig synkronisere et lydspor eller tale med realistiske læbebevægelser af dine karakterer og motiver.

Du kan skrive dit eget script, som dine AI-karakterer kan sige, optage din egen stemme direkte i Runway eller uploade en lydfil. Lip Sync vil derefter synkronisere det med karakterens mundbevægelser, så det ser virkelig ud til, at de leverer den lyd.

Der er også forskellige stemmemuligheder at konfigurere og vælge imellem, når du bruger Lip Sync.

Video til video generation

Du skal blot uploade (eller generere) en video, der skal bruges som baseline eller referencepunkt for AI-modellen. Det vil så lade dig transformere eller ændre den video på forskellige måder, såsom at omdanne en realistisk video til en animeret, eller omvendt.

Input video	Tekstprompt	Output video
	3D halvtone CMYK stil. halvtone print prik. tegneserie. livlige farver i lag af cyanblå, gule, magenta lilla og sorte cirkulære prikker.

Bedste anvisninger til brug af Runway Gen-3 Alpha

For at få mest muligt ud af Gen-3 Alpha, skal du bruge de bedste slags prompter. Runway selv opfordrer brugerne til at holde sig til "[kamerabevægelsen]: [etablering af scene]. [yderligere detaljer]." formel.

For eksempel kan du indsætte en prompt som "langsom vandret pande, en ung kvinde går gennem ørkenen, så begynder det at regne."

Jo flere detaljer du kan sætte ind i dine prompter, jo mere specifikke og skræddersyede resultater får du. Så hvis du har en bestemt vision i tankerne om, hvordan du vil have din video til at se ud, er det bedst at være detaljeret.

Vi kan anvende dette på det foregående eksempel for at få noget som:

"Kameraet panorerer langsomt fra venstre mod højre over en ørken af ​​gyldent sand. En kvinde i midten af ​​20'erne går langsomt hen over scenen. Hun har en blomsterkjole på. Hun kigger op, mens regnen begynder at falde fra grå skyer ovenover."

Her er et par bonustip til at gøre dine prompter bedst muligt:

• Giv så mange detaljer, som du kan, uden at gå overbord. Gen-3 Alpha fungerer bedst med "sweet spot"-prompter, der ikke er alt for enkle eller komplekse.
• Lær om termer for kamerabevægelser og optagelsestyper, så du kan give værktøjet præcise instruktioner til indramning og kameravinkler.
• Brug den samme stil i dine prompter, når du opretter lignende scener eller opfølgende scener, så de bevarer et niveau af konsistens.
• Prøv at lege med Runways egne brugerdefinerede forudindstillede prompts, og gem dine foretrukne til at genbruge i fremtiden.

Runway Gen-2 vs Gen-3 Alpha vs Gen-3 Alpha Turbo

Reddit anmeldelser af Gen-3 Alpha

Så hvad synes almindelige brugere om Runways Gen-3 Alpha? Nå, på nuværende tidspunkt er meningerne om værktøjet noget blandede.

Nogle brugere har hævdet, at de vil blive ved med at bruge Gen-2 indtil videre, da Gen-3 kun er i "Alpha"-stadiet og stadig har brug for nogle forbedringer, før det opfylder sit potentiale.

Kommentar
af u/West_Persimmon_6210 fra diskussion
i runwayml

Andre har klaget over de høje omkostninger ved at bruge Gen-3 Alpha, men nogle har stadig rost teknologien og nøglefunktionerne, den har introduceret.

Kommentar
af u/Puzzled-Emphasis1116 fra diskussion
i runwayml