Funkcja Lip Sync to przydatny dodatek do popularnego modelu generowania wideo Runway AI . Służy do synchronizowania ruchów ust postaci lub osób w filmach AI z dźwiękiem mowy i oferuje wiele przydatnych funkcji. Jednak ponieważ jest to całkiem nowa funkcja, wielu użytkowników nie jest pewnych, jak ona działa. Ten przewodnik wyjaśnia, jak korzystać z funkcji Lip Sync Runway w prosty sposób.
Czym jest synchronizacja ruchu Runway AI?
Lip Sync to, jak sama nazwa wskazuje, funkcja synchronizacji dźwięku mowy z ruchami ust postaci w Twoich filmach AI. Innymi słowy, możesz jej użyć do tworzenia filmów AI, w których postacie realistycznie poruszają ustami i twarzami, aby dopasować je do skryptu tekstowego, który możesz napisać w swoich monitach lub przesłać jako osobny plik audio.
Zastosowania tego są dalekosiężne. Twórcy mogą używać Lip Sync, na przykład do tworzenia realistycznych scen postaci wdających się w dialog ze sobą, czytających przemówienie lub wygłaszających oświadczenie. Otwiera to nowe możliwości pod względem rodzaju treści – takich jak treści w stylu filmowym i telewizyjnym – które teoretycznie można by tworzyć za pomocą Runway AI.
Jak korzystać z synchronizacji ruchu warg w Runway AI
Teraz, gdy wiesz, na czym polega funkcja Lip Sync, przyjrzyjmy się, jak jej używać. Oto prosty przewodnik krok po kroku, wraz ze zrzutami ekranu, który pokaże Ci dokładnie, jak możesz używać Lip Sync, aby tworzyć filmy AI z idealnie zsynchronizowanym dźwiękiem.
Krok 1. Uzyskaj dostęp do narzędzia Lip Sync
Pierwszy krok jest prosty. Jeśli chcesz użyć narzędzia Lip Sync, musisz kliknąć i wybrać „Lip Sync Video” na liście „Runway's AI Tools”, którą znajdziesz na pulpicie Runway .
Krok 2. Dodaj wideo lub obraz
Następnie będziesz potrzebować obrazu lub wideo, które będzie podstawą do ostatecznego dzieła. Możesz przeciągnąć i upuścić lub kliknąć, aby przesłać wideo lub obraz w dowolnym z obsługiwanych formatów. Jeśli używasz wideo, upewnij się, że postać, którą chcesz zobaczyć mówiącą, jest obecna w pierwszej klatce.
Krok 3. Wybierz swój głośnik
Gdy obraz lub wideo zostanie załadowane do Runway, spróbuje ono automatycznie wykryć twarz mówcy. W większości przypadków nie powinno mieć problemu z wykryciem kluczowej postaci na obrazie, ale może mieć trudności, jeśli prześlesz obraz z wieloma osobami lub niewyraźnymi postaciami. Jeśli tak się stanie, możesz kliknąć obraz samodzielnie i przeciągnąć pole na twarz mówcy.
Krok 4. Wybierz głos
Kliknij ikonę mikrofonu obok głośnika, aby wybrać dla niego głos. Runway oferuje Ci całą masę różnych opcji głosowych i możesz przejrzeć każdą z nich, naciskając mały przycisk „Play”. Następnie, gdy znajdziesz taką, która Ci odpowiada, kliknij, aby ją wybrać.
Krok 5. Wprowadź swój skrypt lub prześlij plik audio
Następnie musisz powiedzieć narzędziu, co chcesz, aby powiedział Twój mówca. Masz dwie opcje. Możesz kliknąć w pole tekstowe obok swojego mówcy i wpisać, co chcesz, aby powiedział. Możesz też przesłać plik audio, który już zawiera nagranie przemówienia, które chcesz usłyszeć w ostatecznym filmie.
Krok 6. (Opcjonalnie) Dodaj dodatkowe głośniki
Jest to opcjonalny krok w sytuacjach, w których chcesz, aby w Twoim filmie przemawiało wiele osób. Możesz kliknąć przycisk „Dodaj mówcę” u dołu okna sesji, aby dodać każdego mówcę, a następnie kliknąć ikonę profilu dla każdego mówcy, aby dopasować go do jednej z wykrytych twarzy w Twoim filmie. Następnie wpisz swój skrypt lub prześlij dźwięk, który chcesz usłyszeć.
Krok 7. Kliknij przycisk Generuj
Po dodaniu wszystkich żądanych dialogów możesz po prostu nacisnąć przycisk „Generuj” na dole strony i zaczekać chwilę, aż Runway utworzy Twój film. Następnie możesz go obejrzeć, zapisać i udostępnić innym.
Ponadto pamiętaj, że możesz również dodać Lip Sync do filmów generowanych przez AI, wykonanych przy użyciu wszystkich różnych modeli Runway , takich jak Gen-2, Gen-3 i Gen-3 Alpha Turbo. Wystarczy, że utworzysz swój film, a następnie klikniesz „Akcja”, a następnie „Lip Sync”.
Najlepsze praktyki korzystania z synchronizacji ruchu ust na Runway
Funkcja Lip Sync w Runway jest przydatna i przyjemna w użyciu, ale nie jest idealna. Jeśli chcesz uzyskać najlepsze rezultaty z tą funkcją, musisz przestrzegać pewnych zalecanych najlepszych praktyk, które są następujące:
- Jeśli korzystasz z przesłanych plików z mową, ich długość nie może przekraczać 40 sekund.
- Ustaw swoje postacie twarzą do przodu, w stronę kamery.
- Używaj wyłącznie ludzkich twarzy – zwierzęta mogą zostać dodane w przyszłości, ale na razie nie działa to prawidłowo.
- Umieść głowy i ramiona swoich postaci w kadrze, nie przybliżaj ich ani nie oddalaj.
- Wybieraj fotorealistyczne style postaci, a nie animowane lub kreskówkowe.
- Unikaj nadmiernych ruchów ciała, rąk i aparatu.
- Zachowaj spójność oświetlenia w swoich filmach z wykorzystaniem sztucznej inteligencji.
- Unikaj szybkich cięć i przejść, które mogą zakłócić płynność dźwięku/mowy.
- Upewnij się, że używasz obsługiwanych typów plików audio i wideo.
- Staraj się skupiać na jednej postaci w kadrze – gorzej to działa, gdy w kadrze jest wiele twarzy.
Wypróbuj już dziś funkcję Lip Sync firmy Runway AI z Pollo AI
Jeśli chcesz przetestować funkcję Runway Lip Sync, możesz to zrobić łatwo i bezpłatnie na Pollo AI! Pollo AI to wiodący generator wideo AI, który zapewnia dostęp do szeregu modeli generowania wideo AI, w tym Runway's Gen 2 , Gen 3 Alpha i Turbo , Hailuo AI i Luma AI oraz innych. Oferuje również szereg narzędzi i zalet, takich jak szablony do tworzenia filmów z całowaniem AI. Możesz przetestować je wszystkie, wszystkie za darmo i wszystko w jednym miejscu dzięki Pollo AI.