Runway Gen-2
Runway Gen-2是一种先进的多模式视频生成模型,允许用户从文本提示、图像或现有视频片段创建视频。它由Runway于2023 年 2 月推出,是首批商业上可用的文本/图像转视频模型之一。在下面试用Gen-2 !
文本到视频的生成
使用Runway Gen-2,用户只需输入描述性文字提示即可创建视频。其人工智能会解释这些提示以创建视频内容,让用户能够将现实中可能不存在的概念形象化。
请参阅Runway提供的以下示例:
迅速的 | 输出视频 |
午后的阳光透过纽约阁楼的窗户照进来。 |
图像到视频的生成
Gen-2 的图像转视频功能可以根据上传的图像(称为“驾驶图像”)生成视频。借助此功能,您可以创建反映原始图像本质的动态内容。
图像 | 输出视频 |
运动画笔
Runway Gen-2具有强大的运动画笔工具,使用户能够向视频创作的特定区域添加受控的运动。
运动画笔允许用户在图像的某些区域上绘画,然后将运动动态分配给所选元素。此功能简化了视频生成过程:它允许用户创建动画,而无需复杂的输入或大量的编辑技能。
Runway 的运动刷样图 | 输出 |
摄影机控制
Runway Gen-2 的摄像头控制功能为用户提供了高级功能,可以在视频创作中操纵摄像头的移动。您可以控制摄像头在多个方向上的移动,包括水平/垂直移动、平移、倾斜、缩放和滚动。
将风格应用于视频
Runway Gen-2提供了多种风格供您应用于生成的视频,为视频提供独特、吸引人的美感。它提供 30 多种预设风格供您选择,包括电影、动漫、等距等。您甚至可以创建自己的自定义风格来应用于视频。
口型同步
Runway 的 Lip Sync 功能是Gen-2平台中的一项创新工具,它允许用户创建视频,视频中的面部看起来与音频片段同步说话或朗读脚本。此功能对于创建逼真的说话动画特别有用。
原始图像 | 演讲文本 | 输出口型同步视频 |
拥抱对理解的追求,点燃好奇心之火。学习是旅程,知识是目的地。 |
Runway Gen-2VSGen-3 AlphaVSGen-3 Alpha Turbo
特征 | Gen-2 | Gen-3 Alpha | Gen-3 Alpha Turbo |
视频时长 | 4秒 | 5/10秒 | |
视频分辨率 | 1408 × 768px (高级关闭) 2816 × 1536px (高档开启) | 1280x768像素 | 1280x768像素 768x1280像素 |
文字转视频 | |||
图像转视频 | |||
视频到视频 | |||
运动画笔 | |||
相机控制 | |||
自定义样式 | |||
口型同步 | |||
第一幕 |
Reddit上的Runway评论
一些用户将Runway Gen-2与其竞争对手之一的图像到视频进行了比较。Runway Runway Gen-2可以产生更好的效果。 阅读更多 >>
Gen-2有非常严格的政策来避免虐待儿童。一些用户试图将包含儿童的图片上传到Gen-2制作动画,并立即收到警告。 阅读更多 >>
Runway Gen-2视频评论
常见问题解答
RunwayML Gen-2免费吗?
Runway为其用户提供免费计划,以试用 Gen-2 的功能。该计划的信用额度有限,并且有限制,例如每个视频输出上的水印不可去除。如需更多功能和使用,您可以订阅其付费订阅计划之一。
RunwayGen-1 和Gen-2有什么区别?
Runway Gen-2是 Gen-1 的重大升级,引入了仅使用文本提示或图像从头生成视频的功能,这在早期版本中是不可能的。它具有多种视频创建模式,包括文本到视频和图像到视频,并提供更高清晰度的输出,具有更好的真实感和更流畅的动作。
第三代Runway和Gen-2跑道有何区别?
Runway Gen-3 比Gen-2更胜一筹,能够以惊人的速度生成高保真视频。Gen-3 能够生成更逼真的动作和复杂的动作。它还提供更高级的功能,例如视频到视频生成和 Act-One。
为Runway Gen-2创建提示的最佳实践是什么?
Gen-2写作提示的最佳实践包括使用 [风格或美学] 风格的 [主题] 结构、加入动词以增强提示中的动作和运动,以及使用与相机相关的术语来指导视觉风格。
如何使用Gen-2的运动画笔?
我们有一份关于如何在Runway中使用 Motion Brush 的详细指南。阅读文章,看看它是否能帮助您更好地理解此功能。