唇形同步功能是流行的Runway AI視訊生成模型的一個有用補充。它用於將 AI 視訊中人物或人類主體的唇部動作與語音音訊同步,並且具有許多實用性。但是,由於它是一個相當新的功能,許多用戶並不確定它是如何運作的。本指南探討如何以簡單的方式使用 Runway 的 Lip Sync 功能。
Runway AI 的 Lip Sync 是什麼?
顧名思義,唇形同步就是將語音音訊與 AI 影片中人物的唇部動作同步的功能。換句話說,您可以使用它來製作 AI 視頻,其中角色可以逼真地移動嘴巴和麵部以匹配您可以在提示中編寫或作為單獨的音頻文件上傳的文本腳本。
其用途十分廣泛。例如,創作者可以使用 Lip Sync 來創建角色相互對話、閱讀演講或發表聲明的逼真場景。這為內容類型(例如電影和電視風格的內容)開闢了新的機會,理論上您可以使用Runway AI來製作這些內容。
如何在Runway AI中使用唇形同步
現在您已經了解了唇形同步功能的全部內容,讓我們看看如何使用它。以下是一個簡單的分步指南,其中包含螢幕截圖,向您展示如何使用 Lip Sync 製作具有完美同步音訊的 AI 影片。
步驟 1. 存取唇形同步工具

第一步很簡單。如果您想使用 Lip Sync 工具,您需要在Runway儀表板上的「Runway 的 AI 工具」清單下按一下並選擇「Lip Sync Video」。
第 2 步:新增影片或影像

接下來,您需要一張圖片或影片作為最終創作的基準。您可以拖放或點擊來上傳任何受支援格式的影片或圖像。如果您使用視頻,請確保您想要看到說話的角色出現在第一幀中。
步驟 3. 選擇揚聲器

一旦您的圖像或影片載入到Runway中,它就會嘗試自動偵測演講者的臉部。大多數情況下,它應該可以毫無問題地識別出圖像中的關鍵人物,但如果您上傳的圖像中有多個人物或人物不清晰,它可能會遇到困難。如果發生這種情況,您可以自行點擊圖像並將框架拖到揚聲器的表面。
步驟 4. 選擇聲音

點擊揚聲器旁邊的麥克風圖示為其選擇聲音。 Runway為您提供了大量不同的聲音選項,您可以按下小「播放」按鈕來預覽每個選項。然後,當您找到所需的一個時,請按一下以選擇它。
步驟5.輸入腳本或上傳音頻

接下來,您需要實際告訴工具您希望揚聲器說什麼。對此你有兩個選擇。您可以點擊揚聲器旁邊的文字方塊並輸入您希望他們說的內容。或者,您可以上傳已經錄製了您想在最終影片中聽到的演講的音訊檔案。
步驟 6.(選購)新增其他揚聲器

如果您希望多個人在視訊中講話,這是一個可選步驟。您可以單擊會話視窗底部的「新增發言者」按鈕以新增每個發言者,然後按一下每個發言者的個人資料圖標,將其與影片中偵測到的其中一個臉孔之一進行配對。然後,輸入您的腳本或上傳您想要聽到的音訊。
步驟 7. 點選生成按鈕

添加完所有想要的對話後,您只需按頁面底部的“生成”按鈕,然後等待Runway製作您的影片。然後您可以查看它、保存它並分享它。
此外,請注意,您還可以將 Lip Sync 添加到使用所有不同Runway模型(如Gen-2、Gen-3 和Gen-3 Alpha Turbo)製作的 AI 生成的影片中。您只需製作視頻,然後單擊“操作”,然後單擊“唇形同步”。

在Runway中使用唇形同步的最佳實踐
Runway中的 Lip Sync 功能很實用,使用起來也很有趣,但它並不完美。如果您想利用此功能獲得最佳效果,則需要遵循某些建議的最佳做法,如下所示:
- 如果您使用任何上傳的語音文件,請將其最長保持在 40 秒內。
- 讓你的角色面朝前方,面向鏡頭。
- 僅使用人臉——將來可能會添加動物,但目前還不起作用。
- 讓角色的頭部和肩膀出現在鏡頭中,不要太放大或太縮小。
- 選擇逼真的角色風格,而不是動畫或卡通風格。
- 避免身體、手或相機過度移動。
- 保持 AI 影片中的燈光一致。
- 避免任何會打斷音訊/語音流程的快速切換或轉換。
- 確保您使用受支援的音訊和視訊檔案類型。
- 試著堅持在畫面中的一個角色-對於多個面孔,效果不太好。
立即使用Pollo AI嘗試Runway AI 的 Lip Sync
如果您想測試Runway Lip Sync 功能,您可以在Pollo AI上輕鬆免費地進行測試! Pollo AI是一款領先的 AI 視訊產生器,可讓您存取一系列 AI 視訊生成模型,包括Runway 的 Gen 2 、 Gen 3 Alpha和Turbo 、 Hailuo AI和Luma AI等。它還提供一系列工具和優勢,例如製作 AI 接吻影片的模板。 您可以使用Pollo AI對所有產品進行測試,所有產品均免費,並且可在同一個地方進行。