Runway Gen-2
Runway Gen-2 — это усовершенствованная модель мультимодальной генерации видео, позволяющая пользователям создавать видео из текстовых подсказок, изображений или существующих видеоклипов. Она была запущена Runway в феврале 2023 года как одна из первых коммерчески доступных моделей преобразования текста/изображения в видео . Попробуйте Gen-2 ниже!
Генерация текста в видео
С помощью Runway Gen-2 пользователи могут создавать видео, просто вводя описательные текстовые подсказки. Его ИИ интерпретирует эти подсказки для создания видеоконтента, позволяя пользователям визуализировать концепции, которые могут не существовать в реальности.
См. следующий пример, предоставленный Runway:
| Быстрый | Выходное видео |
| Вечернее солнце заглядывает в окно лофта в Нью-Йорке. |
Генерация изображения в видео
Функция преобразования изображений в видео Gen-2 позволяет генерировать видео на основе загруженного изображения, называемого «управляющим изображением». С его помощью можно создавать динамический контент, отражающий суть исходного изображения.
| Изображение | Выходное видео |
 |
Кисть движения
Runway Gen-2 оснащен мощным инструментом Motion Brush , который позволяет пользователям добавлять контролируемое движение в определенные области своих видеотворений.
Motion Brush позволяет пользователям закрашивать определенные области изображения, а затем назначать динамику движения выбранным элементам. Эта функция упрощает процесс генерации видео: она позволяет пользователям создавать анимацию без необходимости сложных входных данных или обширных навыков редактирования.
| Образец изображения движения взлетно-посадочной полосы | Выход |
 |
Камеральный контроль
Функция управления камерой Runway Gen-2 предоставляет пользователям расширенные возможности для управления движениями камеры в их видеотворениях. Вы можете управлять движением камеры в нескольких направлениях, включая горизонтальное/вертикальное движение, панорамирование, наклон, масштабирование и вращение.
Применить стили к видео
Runway Gen-2 предлагает широкий спектр стилей, которые вы можете применить к сгенерированным видео, предлагая им уникальную, привлекательную эстетику. Он предлагает более 30 предустановленных стилей на выбор, включая кинематографический, аниме, изометрический и другие. Вы даже можете создавать свои собственные пользовательские стили для применения к видео.
Синхронизация губ
Функция Lip Sync от Runway — это инновационный инструмент на платформе Gen-2 , который позволяет пользователям создавать видео, в которых лицо внутри, кажется, говорит синхронно с аудиоклипом или произносит сценарий. Эта функция особенно полезна для создания реалистичных говорящих анимаций.
| Исходное изображение | Текст речи | Вывод видео с синхронизацией губ |
 | Примите поиск понимания, разжигайте огонь любопытства. Обучение — это путешествие, знание — пункт назначения. |
Runway Gen-2 против Gen-3 Alpha против Gen-3 Alpha Turbo
| Функции | Gen-2 | Gen-3 Alpha | Gen-3 Alpha Turbo |
| Продолжительность видео | 4с | 5/10 с | |
| Разрешение видео | 1408 × 768 пикселей (масштабирование выключено) 2816 × 1536 пикселей (масштабирование включено) | 1280x768 пикселей | 1280x768 пикселей 768x1280 пикселей |
| Текст в видео | |||
| Изображение в видео | |||
| Видео в видео | |||
| Кисть движения | |||
| Управление камерой | |||
| Пользовательские стили | |||
| Синхронизация губ | |||
| Акт первый | |||
Обзоры Runway на Reddit
Некоторые пользователи сравнивали Runway Gen-2 с одним из конкурентов по части изображения в видео. И Runway Gen-2 может выдавать лучшие результаты. Читать далее >>
И Gen-2 имеет очень строгую политику, чтобы избежать злоупотреблений в отношении детей. Некоторые пользователи пытались загрузить изображения с детьми в Gen-2 для анимации и получили мгновенное предупреждение. Читать далее >>
Видеообзоры Runway Gen-2
Часто задаваемые вопросы
Является ли RunwayML Gen-2 бесплатным?
Runway предлагает своим пользователям бесплатный план, чтобы попробовать функции Gen-2. Этот план поставляется с ограниченными кредитами и ограничениями, такими как неудаляемые водяные знаки на каждом видеовыходе. Для получения дополнительных функций и использования вы можете подписаться на один из их платных планов подписки.
В чем разница между Runway Gen-1 и Gen-2?
Runway Gen-2 представляет собой существенное обновление по сравнению с Gen-1, предоставляя возможность генерировать видео с нуля, используя только текстовые подсказки или изображения, что было невозможно в более ранней версии. Он имеет несколько режимов для создания видео, включая текст в видео и изображение в видео, и предлагает выходы с более высокой четкостью с улучшенным реализмом и более плавным движением.
В чем разница между Runway Gen-3 и Gen-2?
Runway Gen-3 превосходит Gen-2 , предлагая генерацию видео высокой точности с замечательной скоростью. Gen-3 позволяет генерировать более реалистичные движения и сложные действия. Он также предлагает более продвинутые функции, такие как генерация видео в видео и Act-One.
Каковы наилучшие практики создания подсказок для Runway Gen-2?
Лучшие практики написания подсказок для Gen-2 включают использование структуры [тема] в стиле [стиль или эстетика], включение глаголов для усиления действия и движения в ваших подсказках, а также использование терминологии, связанной с камерой, для управления визуальным стилем.
Как использовать подвижную кисть Gen-2?
У нас есть подробное руководство по использованию Motion Brush в Runway . Прочитайте статью и посмотрите, поможет ли она вам лучше понять эту функцию.
