Руководство по промптам для Video to Video AI: стиль, движение и управление камерой
Я часто замечал, что с видео-в-видео AI бывает сложно работать с подсказками, потому что для изменения уже существующего материала остается очень мало пространства. Так как же следует структурировать инструкции, чтобы управлять стилем, движением и перемещением камеры? Читайте дальше, и я объясню, как лучше всего использовать Pollo AI сегодня!
Все дело в том, чтобы передать то, что важно, для наилучшего результата.TL;DR
Правильная работа с подсказками для video to video AI сводится только к описанию новой эстетики сцены или самого объекта — будь то аниме, Pixar и т. д. — и того, что нужно сохранить в переработанном видео. Помните, что исходное видео, которое вы загружаете, уже задает движение и перемещение камеры, поэтому делайте подсказки короткими, просто указывая, что должно сохраниться после выбранного рестайлинга.
Руководство по подсказкам для Video-to-Video AI с Pollo AI: краткий обзор
| Ключевые аспекты | Практические рекомендации для Pollo AI |
| Основной рабочий процесс | Загрузите видео, выберите готовый стиль, настройте доступные параметры и создайте переработанный клип. Сначала выберите исходный материал и пресет, а уже потом тратьте время на формулировку подсказки. |
| Управление подсказками | Интерфейс video-to-video не поддерживает кинематографические подсказки для новых действий, траекторий камеры, объективов или последовательностей кадров. Используйте подсказки, чтобы усилить внешний вид и приоритеты сохранения, а не чтобы спроектировать совершенно новый кадр. |
| Источник движения/настройки камеры | Загруженное видео задает движение объекта и поведение камеры. Выбирайте материал, в котором уже есть движение камеры, соответствующее желаемому результату, и одно короткое, связное действие с понятным движением и минимумом резких изменений. |
| Управление областью | Restyle Subject Only применяет преобразование в первую очередь к основному объекту, помогая при этом лучше сохранить оригинальный фон. Включайте эту опцию, когда объект является творческим центром, а исходная сцена должна оставаться узнаваемой. |
| Рекомендации по стилю | Используйте подсказки для описания текстуры, палитры, освещения, настроения и приоритетов сохранения, которые усиливают выбранный пресет. Сначала укажите материал и визуальную обработку, затем отметьте, что должно оставаться неизменным. |
| Лучший сценарий использования | Простые демонстрации, где важно сохранить исходное движение. Отдавайте предпочтение клипам с одним видимым объектом и одним понятным действием. |
Как рестайлить видео с помощью Pollo AI
Загрузите видео
Сначала откройте video to video AI, а затем загрузите видео с четко выраженным объектом, понятным движением и хорошим контрастом между объектом и фоном. Я не советую использовать видео низкого разрешения, если вы хотите получить стабильный результат.
Выберите уникальный стиль
У этого AI video to video генератора есть несколько уникальных стилей на выбор. Будь то аниме, пластилиновая анимация, чиби или поп-арт, здесь есть несколько удачных вариантов.
Настройте параметры
Вы можете использовать поле подсказки, чтобы выделить персонажа — человека, животное или объект — и описать стиль, в который вы хотите его преобразовать.
Создайте переработанное видео
После того как вы нажмете «Создать», AI video to video генератор за несколько минут рестайлит ваше видео. Вы сможете просмотреть результат и, если он соответствует вашим ожиданиям, перейти к загрузке. Вот и все!
Чтобы получить подробное пошаговое руководство, прочитайте наше руководство о том, как использовать video to video AI.
Руководство по генерации Video-to-Video AI: подсказки для стиля
Как я показал в пошаговом процессе, для кинематографических подсказок здесь почти нет пространства. Хотя вам может захотеться составить подробные инструкции с объектом, действием, сценой, объективом, движением камеры и т. д., инструмент AI video to video не создан для интерпретации всех этих параметров.
Так где же здесь используются подсказки? Все дело в направлении стиля. Здесь ваши подсказки нужны лишь для того, чтобы усилить выбранный пресет, поэтому не стоит ожидать, что вы сможете полностью изменить композицию или создать совершенно новую траекторию камеры.
Например, если я выбираю стиль аниме, короткого описания вроде «чистый cel shading, выразительная контурная линия, насыщенные цвета заката» достаточно. Главное — упомянуть такие аспекты стиля, как качество edge, палитра и т. д., а также то, что должно оставаться узнаваемым, например форму продукта, черты лица и т. д.
На самом деле вот пример подсказки для рестайлинга, который я использовал раньше:
Подсказка
Стиль пластилиновой анимации, ручная текстура пластилина, теплые цвета, видимые детали лепной поверхности, сохраните силуэт объекта и жесты рук
Видите, почему это хорошо работает? Потому что здесь акцент сделан на желаемом стиле, текстуре, цвете и сохранении. Я не пытаюсь управлять движением камеры или движением объекта, которые уже заданы исходным материалом.
А теперь вот что НЕ нужно делать при работе с подсказками в video to video AI:
Предупреждение
Пластилиновый персонаж идет вперед, затем камера поднимается вверх, облетает персонажа, приближает лицо и показывает за ним миниатюрный город
Видите, почему это не сработает? Потому что в подсказке не указано, что именно инструмент должен сделать с направлением стиля, а также потому, что инструкция описывает совершенно новый кадр. Хотя это может быть хорошей подсказкой для text to video или image to video, на video to video это не влияет.
В конечном счете загруженный мной материал остается фиксированной основой. Поэтому если в исходном клипе нет крана, облета, зума и т. д., я не могу попросить AI video restyler добавить их.
Когда поле подсказки принимает только небольшой объем текста, я советую ставить на первое место самые важные элементы: стиль, объект и движение или идентичность, которые необходимо сохранить.
Все дело в том, чтобы передать то, что важно, для наилучшего результата.Придайте вашему видео свежий вид
Загрузите понравившийся клип, выберите визуальный стиль и откройте для себя новое творческое направление с помощью видеорестайлинга Pollo AI.
Изменить стиль видео с помощью ИИ
Руководство по генерации видео в видео с ИИ: работа с движением
Когда речь идет о контроле движения, для промптов остается не так много пространства. Почему? Потому что исходное видео и есть сам промпт движения. Будь то танцевальное видео, человек, идущий по улице, или что-то еще, инструмент переосмысливает то, что есть в исходном клипе.
Именно поэтому я подчеркиваю важность загрузки простого, легко читаемого видео. Вместо роликов с перекрывающимися телами, быстрыми склейками, сильным смазыванием движения и так далее я советую сцены с одним объектом, простым действием и четким отделением от фона. Это лучший способ добиться хорошего результата.
Вот почему перед загрузкой любых клипов я просматриваю материал и оцениваю, что делает объект, как быстро он движется и поддерживает ли движение камеры действие.
Вот пример промпта для text to video, который может дать отличный исходный материал:
Промпт
Медленный плавный трекинг-кадр одинокого танцора, идущего слева направо через залитую солнцем бетонную площадь. Танцор выполняет один контролируемый поворот и продолжает идти. Средне-широкий план, в полный рост, стабильная камера, непрерывный бесшовный дубль, теплый свет позднего дня
Руководство по генерации видео в видео с ИИ: контроль камеры
И снова видео в видео с ИИ оставляет не так много пространства для управления камерой через промпт. Так что бы я рекомендовал? Я бы выбрал материал с относительно простым движением камеры, например статичные, зафиксированные средние планы или медленные трекинг-кадры.
Я часто замечал, что исходный материал, где камера остается достаточно неподвижной или движется медленно и контролируемо, — это всегда безопасный выбор. Такие планы дают инструменту рестайлинга видео с ИИ четкую визуальную структуру, которой можно следовать.
Поэтому я бы старался избегать клипов с быстрыми или сложными движениями камеры, такими как whip pan, орбиты, быстрые краны и так далее. Эти киношные видеокадры могут немного затруднить рестайлинг для видео в видео с ИИ, потому что в клипе слишком много элементов быстро меняются.
Однако это не значит, что при видео в видео нельзя вообще задавать камеру через промпт. Напротив, я бы сказал, что ваша задача — убедиться, что результат сохраняет исходную работу камеры. Например, вот короткая инструкция, которую вы можете смело включать в свои промпты:
Промпт
[... Сохраняйте исходное движение камеры в точности: сохраняйте ту же композицию кадра, траекторию камеры, скорость, тайминг, перспективу и положение объекта]
Так что, хотя я не могу использовать промпт, чтобы задать отсутствующую кинематографию, я все же могу использовать его, чтобы сохранить кадрирование, движение и тайминг. Речь идет о том, чтобы дать генератору видео в видео с ИИ указания о том, что не следует менять при обработке уже существующих движений камеры. Если вы хотите создать новый кадр с большим контролем над движением камеры, объективами и освещением, попробуйте Pollo Cinema перед рестайлингом материала.
Видео в видео с ИИ и Pollo AI: практические промпты для рабочего процесса
При использовании генератора видео в видео с ИИ я считаю самым важным выбирать материал, в котором уже есть нужные мне движение камеры, кадрирование, тайминг и игра объекта. Как я уже говорил, движение и контроль камеры полностью зависят от исходного материала.
Поэтому перед загрузкой я всегда убеждаюсь, что объект достаточно хорошо виден для отслеживания, основное действие легко понять, а движение камеры соответствует нужному настроению. Единственная часть, на которую я могу напрямую повлиять своими промптами, — это то, как должен выглядеть финальный результат после рестайлинга.
Поэтому я советую делать промпты короткими, ориентированными на стиль и четкими в части сохранения исходника. Вот несколько практических примеров для разных сценариев, из которых вы можете взять идеи:
Для аниме-танцевального видео:
| Промпт |
| Рестайлинг в стиле аниме с выразительной линией, яркими акцентами мадженты и циана, сохранить исходную хореографию и тайминг, четко сохранить силуэт танцора |
Для демонстрации продукта:
| Промпт |
| Премиальный вид глиняной анимации, текстура поверхности ручной работы, мягкий теплый студийный свет, сохранить форму продукта, расположение логотипа и исходное вращение на поворотном столе |
Для стилизованного портрета:
| Промпт |
| Живописный стиль сказочной книги, приглушенная осенняя палитра, мягкая текстура мазков, сохранить идентичность лица, движение головы и исходное медленное приближение |
Как видите, при видео в видео с ИИ мне никогда не нужно усложнять промпты. Я просто описываю стиль и то, что нужно сохранить; все остальное в конечном итоге определяется тем, что я загружаю.
Заключение
При использовании видео в видео с ИИ все дело в том, чтобы задать желаемое изменение стиля. Исходный материал уже содержит движение и движение камеры, так что возьмите приведенные мной примеры промптов и используйте их как ориентир. Более того, просто примените их на Pollo AI прямо сейчас!