1 月 18 日,视频生成平台 Runway 宣布推出多重运动画笔功能,效果惊艳,堪称视频生成方面的杀手级升级。
去年 11 月份,Runway 宣布旗下视频生成模型 Gen-2 上线“运动画笔”功能。通过使用运动笔刷,用户只需在一张图片中涂抹一个区域或主体,并为其选择一个方向、添加运动强度,原本静止的图片便会受控动起来,就像被施了魔法一样。运动画笔功能很快在创作者社区掀起了一阵图生视频的热潮。
视频生成正在成为继图片生成之后的下一个 AIGC 风口,催生出一批优秀的AI初创公司,例如 AI 视频生成公司 Pika,这个仅 4 人的团队仅用半年就把该公司估值做到超过 2 亿美元。
但在 AI 视频生成领域, Runway绝对属于第一梯队,不仅发力早,而且产品迭代速度迅速,例如刚刚推出的多重运动画笔功能。此举增强了 Runway 在快速增长的视频生成市场的地位,其中包括 Pika Labs 和 Leonardo AI 等参与者。
该功能允许用户通过独立的动作控制视频创作的多个区域。 在之前发布的运动画笔的基础上,这个新工具允许用户在输入图像中绘制最多五个独特的主题或区域,并与其他区域分开操纵它们的运动。 多重运动画笔为 AI 视频创建和编辑添加了额外的创意控制。
这一进步对于商用 AI 生成视频项目而言尚属首次:现阶段市场上的所有其他竞争对手产品都只是使用 AI 为整个图像或选定的突出显示区域(而不是多个区域)添加运动。
其实在今年早些时候,多重运动画笔功能已经通过 Runway 的创意合作伙伴计划进行了预览,该计划为精选的高级用户提供无限计划和预发布功能的奖励。 但现在 Gen-2 的每个用户都可以使用它,该模型已经为创意视频制作人提供了 30 多种工具。
免费体验链接:https://app.runwayml.com/ai-tools/ai-tools/gen-2
多重运动画笔有何值得期待的?
多重运动画笔的想法很简单:通过允许用户向选择的区域添加独立的动作,让用户更好地控制他们生成的 AI 视频。
这可以是任何东西:鸟儿在雪中整理羽毛,火箭发射中,多个台球在运动,汽车在雪山下行驶等等。
火山喷发:岩浆乡下流淌,浓烟向上喷涌
Gen-2 的控制得到了改进
Gen-2 模型最初于 2023 年 3 月推出,引入了基于文本、视频和图像的生成,是对仅支持基于视频的输出的 Gen-1 的重大升级。
然而,在初始阶段,Gen-2 生成的视频剪辑最多只有四秒。 去年 8 月份,Runway 将剪辑延长至最长 18 秒。
它还推出了“导演模式”等附加功能,允许用户在生成的视频中选择摄像机移动的方向和强度/速度,以及选择要制作的视频风格的选项 - 从 3D 卡通到 渲染到电影到广告。
在 AI 视频生成领域,Runway 与 Pika Labs 等公司正在展开激烈竞争,后者最近推出了用于视频生成的网络平台 Pika 1.0,以及 Stability AI 推出的稳定视频扩散模型。
多重运动笔刷的推出增强了 Runway 提供的用于控制 Gen-2 型号视频输出的工具集,这使得 Runway 在这场视频生成竞争中领先一步。
参考资料:
https://venturebeat.com/ai/runway-gen-2-adds-multiple-motion-controls-to-ai-videos-with-multi-motion-brush/
https://twitter.com/iam_chonchol/status/1747868619588133251
热门跟贴