คู่มือพรอมต์ AI วิดีโอเป็นวิดีโอ: สไตล์ การเคลื่อนไหว และการควบคุมกล้อง
ฉันมักพบว่าการสั่งพรอมต์สำหรับวิดีโอเป็นวิดีโอด้วย AI นั้นค่อนข้างยาก เพราะมีพื้นที่ให้เปลี่ยนแปลงฟุตเทจเดิมน้อยมาก แล้วเราควรจัดโครงสร้างคำสั่งอย่างไรเพื่อควบคุมสไตล์ การเคลื่อนไหว และการเคลื่อนกล้อง? อ่านต่อ แล้วฉันจะอธิบายวิธีใช้ Pollo AI ให้ดีที่สุดในวันนี้!
TL;DR
การสั่งพรอมต์ที่เหมาะสมสำหรับ video to video AI คือการอธิบายเฉพาะสุนทรียะใหม่ของฉากหรือวัตถุเท่านั้น ไม่ว่าจะเป็นอนิเมะ Pixar ฯลฯ และสิ่งที่ต้องคงไว้ในฟุตเทจที่ปรับสไตล์แล้ว จำไว้ว่าวิดีโอต้นฉบับที่คุณอัปโหลดได้กำหนดการเคลื่อนไหวและการเคลื่อนกล้องไว้แล้ว ดังนั้นให้พรอมต์ของคุณสั้น โดยระบุเพียงว่าสิ่งใดควรถูกคงไว้หลังการปรับสไตล์ที่เลือก
คู่มือพรอมต์ AI วิดีโอเป็นวิดีโอด้วย Pollo AI: สรุปแบบรวดเร็ว
| ประเด็นสำคัญ | แนวทางปฏิบัติสำหรับ Pollo AI |
| เวิร์กโฟลว์หลัก | อัปโหลดวิดีโอ เลือกสไตล์ที่ตั้งไว้ล่วงหน้า ปรับตัวเลือกที่มีอยู่ แล้วสร้างคลิปที่ปรับสไตล์แล้ว เลือกฟุตเทจต้นทางและพรีเซ็ตก่อนจะเสียเวลากับการเขียนพรอมต์ |
| การควบคุมพรอมต์ | อินเทอร์เฟซวิดีโอเป็นวิดีโอไม่รองรับการสั่งพรอมต์เชิงภาพยนตร์เกี่ยวกับการกระทำใหม่ เส้นทางกล้อง เลนส์ หรือลำดับช็อต ใช้พรอมต์เพื่อย้ำลุคและลำดับความสำคัญในการคงไว้ ไม่ใช่เพื่อออกแบบช็อตใหม่ทั้งหมด |
| แหล่งที่มาของการเคลื่อนไหว/แนวทางกล้อง | วิดีโอที่อัปโหลดจะเป็นตัวกำหนดการเคลื่อนไหวของตัวแบบและพฤติกรรมของกล้อง เลือกฟุตเทจที่การเคลื่อนกล้องเดิมสอดคล้องกับผลลัพธ์ที่ต้องการอยู่แล้ว และมีการกระทำสั้น ๆ ที่ต่อเนื่อง ชัดเจน และมีการเปลี่ยนแปลงฉับพลันน้อย |
| การควบคุมขอบเขต | Restyle Subject Only จะใช้การแปลงกับตัวแบบหลักเป็นหลัก ขณะเดียวกันก็ช่วยคงพื้นหลังเดิมไว้ได้มากขึ้น เปิดใช้เมื่อเป้าหมายเชิงสร้างสรรค์อยู่ที่ตัวแบบ และต้องการให้ฉากเดิมยังดูคุ้นเคย |
| แนวทางด้านสไตล์ | ใช้พรอมต์สำหรับพื้นผิว โทนสี แสง อารมณ์ และลำดับความสำคัญในการคงไว้ เพื่อเสริมพรีเซ็ตที่เลือก เริ่มจากวัสดุและการจัดการภาพก่อน แล้วค่อยระบุว่าสิ่งใดต้องคงความเสถียรไว้ |
| กรณีใช้งานที่เหมาะที่สุด | การสาธิตแบบง่ายที่การเคลื่อนไหวเดิมควรค่าแก่การคงไว้ เลือกคลิปที่มีตัวแบบที่มองเห็นได้หนึ่งตัวและการกระทำที่ชัดเจนหนึ่งอย่าง |
วิธีปรับสไตล์วิดีโอด้วย Pollo AI
อัปโหลดวิดีโอของคุณ
ก่อนอื่น ให้เปิด video to video AI แล้วอัปโหลดวิดีโอที่มีตัวแบบชัดเจน การเคลื่อนไหวที่อ่านได้ และคอนทราสต์ที่ดีระหว่างตัวแบบกับพื้นหลัง ฉันไม่แนะนำให้ใช้ฟุตเทจความละเอียดต่ำหากคุณต้องการผลลัพธ์ที่สม่ำเสมอ
เลือกสไตล์ที่ไม่ซ้ำ
เครื่องมือสร้างวิดีโอเป็นวิดีโอด้วย AI นี้มีสไตล์เฉพาะตัวให้เลือกหลายแบบ ไม่ว่าจะเป็นอนิเมะ ดินน้ำมัน ชิบิ หรือป๊อปอาร์ต ก็มีตัวเลือกที่ดีหลายแบบ
ปรับการตั้งค่า
คุณสามารถใช้กล่องพรอมต์เพื่อแยกตัวละคร ไม่ว่าจะเป็นคน สัตว์ หรือวัตถุ และอธิบายสไตล์ที่คุณต้องการให้เปลี่ยนเป็นแบบนั้น
สร้างวิดีโอที่ปรับสไตล์แล้วของคุณ
เมื่อคุณคลิก ‘Create’ เครื่องมือสร้างวิดีโอเป็นวิดีโอด้วย AI จะปรับสไตล์วิดีโอของคุณภายในไม่กี่นาที คุณสามารถตรวจสอบได้ และหากตรงตามที่คาดหวัง ก็สามารถดาวน์โหลดต่อได้ เท่านี้เอง!
หากต้องการคำแนะนำแบบละเอียด อ่านคู่มือของเราเกี่ยวกับ วิธีใช้ video to video AI
คู่มือการสร้างด้วย AI วิดีโอเป็นวิดีโอ: การสั่งพรอมต์ด้านสไตล์
อย่างที่ฉันได้แสดงไว้ในเวิร์กโฟลว์แบบทีละขั้นตอน พื้นที่สำหรับการสั่งพรอมต์เชิงภาพยนตร์มีไม่มาก แม้ว่าคุณอาจอยากเขียนคำสั่งละเอียดที่มีตัวแบบ การกระทำ ฉาก เลนส์ การเคลื่อนกล้อง ฯลฯ แต่เครื่องมือวิดีโอเป็นวิดีโอด้วย AI ไม่ได้ถูกสร้างมาเพื่อตีความข้อมูลเหล่านั้นทั้งหมด
แล้วพรอมต์เข้ามามีบทบาทตรงไหน? มันเกี่ยวกับการกำหนดทิศทางของสไตล์ล้วน ๆ ตรงนี้พรอมต์ของคุณมีไว้เพื่อเสริมพรีเซ็ตที่เลือกเท่านั้น ดังนั้นคุณจึงไม่ควรคาดหวังว่าจะออกแบบองค์ประกอบภาพใหม่ทั้งหมดหรือสร้างเส้นทางกล้องใหม่ทั้งหมดได้
ตัวอย่างเช่น ถ้าฉันเลือกสไตล์อนิเมะ คำอธิบายสั้น ๆ อย่าง “clean cel shading, bold linework, saturated sunset colors” ก็เพียงพอแล้ว สิ่งสำคัญคือการกล่าวถึงแง่มุมของสไตล์ เช่น คุณภาพ edge พาเลตต์ ฯลฯ และสิ่งที่ต้องยังคงจดจำได้ เช่น รูปร่างของผลิตภัณฑ์ เอกลักษณ์ใบหน้า ฯลฯ
จริง ๆ แล้ว นี่คือตัวอย่างพรอมต์ปรับสไตล์ที่ฉันเคยใช้มาก่อน:
พรอมต์
สไตล์แอนิเมชันดินน้ำมัน พื้นผิวพลาสติกีนทำมือ โทนสีอบอุ่น รายละเอียดพื้นผิวปั้นที่มองเห็นได้ คงรูปทรงเงาของตัวแบบและท่าทางมือไว้
เห็นไหมว่าทำไมมันถึงได้ผลดี? เพราะมันมุ่งเน้นไปที่การเน้นสไตล์ พื้นผิว สี และการคงไว้ที่ฉันต้องการ ฉันไม่ได้พยายามควบคุมการเคลื่อนกล้องหรือการเคลื่อนไหวของตัวแบบที่ฟุตเทจต้นฉบับได้กำหนดไว้แล้ว
ต่อไปนี้คือสิ่งที่ ไม่ควร ทำเมื่อสั่งพรอมต์ด้วย video to video AI:
คำเตือน
ตัวละครดินน้ำมันเดินไปข้างหน้า จากนั้นกล้องเครนขึ้น หมุนรอบตัวละคร ซูมเข้าไปที่ใบหน้า และเผยให้เห็นเมืองจิ๋วอยู่ด้านหลัง
เห็นไหมว่าทำไมสิ่งนี้ถึงใช้ไม่ได้? เพราะพรอมต์ไม่ได้ระบุว่าเครื่องมือต้องทำอะไรกับทิศทางของสไตล์ และคำสั่งยังอธิบายช็อตใหม่ทั้งหมดด้วย แม้ว่านี่อาจเป็นพรอมต์ที่ดีสำหรับ text to video หรือ image to video แต่ก็ไม่มีผลกับ video to video
ท้ายที่สุด ฟุตเทจที่ฉันอัปโหลดก็ยังคงเป็นพื้นฐานที่ตายตัว ดังนั้น หากคลิปต้นฉบับไม่มีการเครน การโคจร การซูม ฯลฯ ฉันก็ไม่สามารถขอให้เครื่องมือปรับสไตล์วิดีโอ AI เพิ่มสิ่งเหล่านั้นเข้าไปได้
เมื่อช่องพรอมต์รับข้อความได้เพียงเล็กน้อย ฉันแนะนำให้ใส่องค์ประกอบที่สำคัญที่สุดก่อน ได้แก่ สไตล์ ตัวแบบ และการเคลื่อนไหวหรือเอกลักษณ์ที่ต้องคงไว้มันคือการสื่อสารสิ่งที่สำคัญเพื่อให้ได้ผลลัพธ์ที่ดีที่สุดเท่าที่จะเป็นไปได้.
ปรับลุคให้ฟุตเทจของคุณดูสดใหม่
อัปโหลดคลิปที่คุณชอบ เลือกสไตล์ภาพ แล้วสำรวจทิศทางสร้างสรรค์ใหม่ด้วยการรีสไตล์วิดีโอของ Pollo AI
รีสไตล์วิดีโอด้วย AI
คู่มือการสร้างวิดีโอด้วย AI แบบวิดีโอเป็นวิดีโอ: การจัดการการเคลื่อนไหว
เมื่อพูดถึงการควบคุมการเคลื่อนไหว ก็แทบไม่มีพื้นที่ให้ใส่พรอมต์มากนัก ทำไมถึงเป็นแบบนั้น? เพราะวิดีโอต้นฉบับก็คือพรอมต์การเคลื่อนไหวอยู่แล้ว ไม่ว่าจะเป็น วิดีโอเต้น คนที่กำลังเดินไปตามถนน หรืออย่างอื่น เครื่องมือนี้จะตีความสิ่งที่อยู่ในคลิปต้นฉบับใหม่
นั่นคือเหตุผลที่ผมเน้นให้อัปโหลดฟุตเทจที่เรียบง่ายและอ่านภาพได้ชัดเจน แทนที่จะใช้วิดีโอที่มีร่างกายซ้อนทับกัน การตัดต่อเร็ว เบลอจากการเคลื่อนไหวหนัก ๆ ฯลฯ ผมแนะนำให้ใช้ฉากที่มีตัวแบบเพียงคนเดียว การกระทำที่เข้าใจง่าย และแยกจากฉากหลังได้ชัดเจน นี่คือวิธีที่ดีที่สุดในการให้ได้ผลลัพธ์ที่ดี
เพราะเหตุนี้ ก่อนที่ผมจะอัปโหลดคลิปใด ๆ ผมจะตรวจดูฟุตเทจและพิจารณาว่าตัวแบบทำอะไร เคลื่อนไหวเร็วแค่ไหน และการเคลื่อนกล้องช่วยเสริมการกระทำนั้นหรือไม่
นี่คือตัวอย่างพรอมต์ที่ใช้กับการแปลงข้อความเป็นวิดีโอ ซึ่งสามารถทำให้ได้ฟุตเทจต้นฉบับที่ยอดเยี่ยม:
พรอมต์
ช็อตติดตามแบบช้าและลื่นไหลของนักเต้นเดี่ยวที่เดินจากซ้ายไปขวาผ่านลานคอนกรีตที่มีแสงแดดส่องถึง นักเต้นหมุนตัวอย่างควบคุมได้หนึ่งครั้งแล้วเดินต่อ ช็อตระยะกลางกว้าง เห็นเต็มตัว กล้องนิ่ง ถ่ายต่อเนื่องแบบไร้รอยตัด แสงอุ่นยามบ่ายแก่
คู่มือการสร้างวิดีโอด้วย AI แบบวิดีโอเป็นวิดีโอ: การควบคุมกล้อง
อีกครั้งที่ AI แบบวิดีโอเป็นวิดีโอแทบไม่เหลือพื้นที่ให้ควบคุมกล้องผ่านพรอมต์ แล้วผมจะแนะนำให้ทำอะไร? ผมจะเลือกฟุตเทจที่มีการเคลื่อนกล้องค่อนข้างเรียบง่าย เช่น กล้องนิ่ง ล็อกกล้อง ช็อตระยะกลาง หรือช็อตติดตามแบบช้า ๆ
ผมสังเกตบ่อยครั้งว่าฟุตเทจต้นฉบับที่กล้องอยู่นิ่งพอสมควร หรือมีการเคลื่อนกล้องช้าและควบคุมได้ มักเป็นตัวเลือกที่ปลอดภัยเสมอ ช็อตประเภทนี้ช่วยให้เครื่องมือรีสไตล์วิดีโอด้วย AI มีโครงสร้างภาพที่ชัดเจนให้ยึดตาม
ดังนั้น ผมจะพยายามหลีกเลี่ยงคลิปวิดีโอที่มุมกล้องเร็วหรือซับซ้อน เช่น whip pan, orbit, crane แบบรวดเร็ว ฯลฯ ช็อตวิดีโอภาพยนตร์เหล่านี้ อาจทำให้การรีสไตล์วิดีโอเป็นวิดีโอด้วย AI ยากขึ้นเล็กน้อย เพราะมีองค์ประกอบในคลิปที่เปลี่ยนแปลงอย่างรวดเร็วเกินไป
อย่างไรก็ตาม นี่ไม่ได้หมายความว่าคุณจะไม่สามารถใช้พรอมต์กับกล้องในวิดีโอเป็นวิดีโอได้ ตรงกันข้าม ผมคิดว่าจุดสำคัญคือการทำให้แน่ใจว่าผลลัพธ์ยังคงงานกล้องต้นฉบับไว้ ตัวอย่างเช่น นี่คือคำสั่งสั้น ๆ ที่คุณสามารถใส่ในพรอมต์ได้ตามต้องการ:
พรอมต์
[... รักษาการเคลื่อนกล้องต้นฉบับให้เหมือนเดิมทุกประการ: คงเฟรมภาพ เส้นทางกล้อง ความเร็ว จังหวะ มุมมอง และตำแหน่งของตัวแบบไว้เหมือนเดิม]
ดังนั้น แม้ว่าผมจะใช้พรอมต์เพื่อกำกับงานภาพยนตร์ที่ขาดหายไปไม่ได้ แต่ผมก็ยังใช้มันเพื่อคงเฟรม การเคลื่อนไหว และจังหวะเวลาไว้ได้อยู่ มันคือการให้คำแนะนำแก่ตัวสร้างวิดีโอเป็นวิดีโอด้วย AI ว่าอะไรไม่ควรถูกเปลี่ยนเมื่อจัดการกับการเคลื่อนกล้องที่มีอยู่ หากคุณอยากออกแบบช็อตใหม่ที่ควบคุมการเคลื่อนกล้อง เลนส์ และแสงได้มากขึ้น ลองใช้ Pollo Cinema ก่อนจะรีสไตล์ฟุตเทจ
วิดีโอเป็นวิดีโอด้วย AI กับ Pollo AI: พรอมต์เวิร์กโฟลว์ที่ใช้งานได้จริง
เมื่อใช้ตัวสร้างวิดีโอเป็นวิดีโอด้วย AI ผมพบว่าสิ่งสำคัญที่สุดคือการเลือกฟุตเทจที่มีการเคลื่อนกล้อง การจัดเฟรม จังหวะเวลา และการแสดงของตัวแบบที่ผมต้องการอยู่แล้ว อย่างที่ผมบอกไปก่อนหน้านี้ การเคลื่อนไหวและการควบคุมกล้องขึ้นอยู่กับสื่อต้นฉบับทั้งหมด
ดังนั้น ก่อนอัปโหลด ผมจะตรวจเสมอว่ามองเห็นตัวแบบได้ชัดพอที่จะติดตาม การกระทำหลักเข้าใจง่าย และการเคลื่อนกล้องเข้ากับอารมณ์ที่ต้องการ ส่วนเดียวที่ผมสามารถมีอิทธิพลได้โดยตรงผ่านพรอมต์คือการกำหนดว่าผลลัพธ์สุดท้ายควรมีหน้าตาอย่างไรหลังการรีสไตล์
ดังนั้น ผมขอแนะนำให้คุณทำพรอมต์ให้สั้น เน้นสไตล์ และชัดเจนเรื่องการคงสภาพเดิม นี่คือตัวอย่างที่ใช้งานได้จริงจากกรณีใช้งานต่าง ๆ ซึ่งคุณสามารถนำไปเป็นไอเดียได้:
สำหรับ วิดีโอเต้นสไตล์อนิเมะ:
| พรอมต์ |
| รีสไตล์อนิเมะด้วยเส้นสายที่แสดงอารมณ์ สีเน้นแมเจนตาและไซแอนสดใส คงท่าทางการเต้นและจังหวะเดิมไว้ รักษาเงารูปร่างของนักเต้นให้ชัดเจน |
สำหรับเดโมสินค้า:
| พรอมต์ |
| ลุคแอนิเมชันดินเหนียวระดับพรีเมียม พื้นผิวงานทำมือ แสงสตูดิโอนุ่มอุ่น คงรูปทรงสินค้า ตำแหน่งโลโก้ และการหมุนบนแท่นหมุนเดิมไว้ |
สำหรับภาพพอร์ตเทรตสไตลิซ์:
| พรอมต์ |
| สไตล์หนังสือนิทานแบบวาดภาพ โทนสีฤดูใบไม้ร่วงแบบหม่น เนื้อแปรงนุ่ม คงเอกลักษณ์ใบหน้า การเคลื่อนไหวศีรษะ และการดันกล้องเข้าแบบช้าเดิมไว้ |
อย่างที่เห็น เมื่อใช้ AI แบบวิดีโอเป็นวิดีโอ ผมไม่จำเป็นต้องทำพรอมต์ให้ซับซ้อนเกินไป ผมแค่บรรยายสไตล์และสิ่งที่ต้องคงไว้ ส่วนที่เหลือทั้งหมดก็ถูกกำหนดโดยสิ่งที่ผมอัปโหลด
บทสรุป
เมื่อใช้ AI แบบวิดีโอเป็นวิดีโอ ทุกอย่างคือการพรอมต์การเปลี่ยนสไตล์ที่คุณต้องการ ฟุตเทจต้นฉบับมีการเคลื่อนไหวและการเคลื่อนกล้องอยู่แล้ว ดังนั้นให้นำตัวอย่างพรอมต์ที่ผมได้วางไว้ไปใช้เป็นแนวทางอ้างอิง ที่จริงแล้ว แค่เริ่มลงมือใช้มันกับ Pollo AI ตอนนี้เลย!