AI视频王者回归!Runway全新Gen3模型又让网友惊艳了一把
Runway最近推出了新一代视频生成模型Gen-3Alpha,这一模型在保真度、一致性和动作表现方面都有重大改进,为构建通用世界模型迈出了重要一步。Gen-3Alpha具备多项显著的功能和特点,使其成为创意产业中的新星。
视频来自Runway
以下是 Gen3模型的一些关键特点:
重大改进:Gen-3Alpha 是 Runway 在为大规模多模态训练构建的新基础设施上训练的一系列模型中的第一个。与 Gen-2相比,它在保真度、一致性和动作方面有了显著提升。
联合训练:Gen-3Alpha 经过视频和图像的联合训练,将为 Runway 的文本转视频、图像转视频和文本转图像工具提供动力。
控制模式:现有的控制模式包括 Motion Brush、高级摄像头控制、导演模式,以及即将推出的工具,用于更精细地控制结构、风格和动作。
极度稳定的光影:Gen3模型能够生成具有丰富变化且极其稳定的光影效果,即便在高速移动的场景中也能保持高质量输出。
快速生成:Gen3模型的生成速度非常快,5秒视频的生成时间为45秒,10秒视频的生成时间为90秒,这在当前市场上的 AI 视频生成速度中具有明显优势。
审美强:Runway 以其一贯的审美优势,提供了配色和风格上令人满意的视频内容,与一些其他 AI 视频产品相比,其视觉效果更加吸引。
想象力:Gen3模型在处理幻想、玄幻、科幻、魔幻等场景时,展现出了强大的想象力和创作潜力。
物理规律:Gen3在物理规律的表现上达到了行业领先水平,能够生成符合现实物理规律的视频内容。
Gen-3Alpha在一个全新的大规模多模态训练基础设施上进行训练,能够处理和融合文本、图像和视频等不同类型的数据,生成高质量的多模态输出。这种联合训练方法提高了模型在生成动态和静态内容的表现能力。
视频来自Runway
Gen-3Alpha支持多种生成工具,包括从文本到视频(Text to Video)、从图像到视频(Image to Video)、从文本到图像(Text to Image)的转换工具。这些工具为创作者提供了丰富的创作选择,以满足不同的创作需求。
视频来自Runway
在时间控制方面,Gen-3Alpha通过使用时间密集型的字幕进行训练,增强了模型对场景细节和时间变化的理解。这使得它能够生成具有创意过渡和精确关键帧控制的视频内容,实现对生成内容的精确关键帧设置和场景过渡。
视频来自Runway
Prompt:在日本城市以超高速移动的火车窗户上,一个女人的微妙倒影。
从上面这个视频可以看到,Gen-3Alpha在光影上的表现可圈可点,在高速火车上极速变换的夜景灯光效果十分稳定,可以说是相当惊艳了。
Gen-3Alpha还能够生成表达丰富、逼真的人类角色,提供广泛的动作、手势和情绪,为叙事创作提供了新的机会。这一点在提高视频质量和叙事机会方面尤为重要。
高级控制模式的支持也是Gen-3Alpha的一大亮点。它支持运动画笔(Motion Brush)、先进摄像头控制(Advanced Camera Controls)和导演模式(Director Mode),为创作者提供了更大的创作自由和控制力度。
视频来自Runway
在性能方面,Gen-3Alpha采用分布式计算和高效存储架构,确保处理大规模数据时的性能和速度,支持快速训练和生成,满足高效创作的需求。
Runway还引入了新的安全措施,以确保生成内容的安全和可靠性,并与多家顶级娱乐和媒体公司合作进行定制开发。这标志着视频生成技术的又一大步,为创意产业带来了新的可能性。
官网地址:https://top.aibase.com/tool/gen-3-alpha