打开网易新闻 查看精彩图片

由无界 AI + Runway运动笔刷生成

Stable Diffusion、Midjourney、DALL-E ......这些文生图大模型改变了我们曾经依赖的图像生成模式,只需几个词语就能生成精美的图像。但生成式 AI 技术的升级迭代已经不再局限于生成“僵硬”的图片,现在这些图片已经可以动起来了。

近日,Runway 正式推出了“运动画笔”(Motion Brush)功能,让你的图片变成视频 ,迅速动起来。这个新 运动画笔功能有望成为创作者可以用来为 AI 制作的图像和视频添加运动元素的另一个强大工具。 不仅仅是任何运动,而是可以添加到特定区域的非常精确和受控的运动。

运动画笔工具的工作原理是允许用户在其视频生成中添加受控运动。它的工作原理是允许用户“绘制”一个区域或主题,然后选择一个方向并添加强度,然后 Runway 将为该区域添加运动并达到该强度。

Runway的运动画笔允许您为您的生成添加受控运动,从而更好地控制生成的内容,使得模型可控性大幅提高。

Runway 运动笔刷可以转换任何图片为视频,包括在 Midjourney 等模型上生成的图片。此外,Runway 最近也推出了名为 Runway Gen-2 的生成式 AI 模型的新版本,这是一个多模态 AI 系统,能够生成图像、视频和带文本的视频。 用户现在可以使用Gen-2通过简单的文本提示创建新视频。 对于免费帐户,Runway Gen-2 可以生成四秒的视频,可以在任何平台上下载和共享,不过视频会包含水印。

让我们看一下 Runway 的运动画笔,探索如何将其用于 AI 图像和视频。

1. 使用 Midjourney 中生成静态 AI 图像,然后使用 Runway 的运动笔刷将其转换为视频

打开网易新闻 查看精彩图片

打开网易新闻 查看精彩图片

打开网易新闻 查看精彩图片

2. 社交网络上最火热的 Meme 图之一也能动起来

打开网易新闻 查看精彩图片

3. 使用 Runway 制作的音乐视频

打开网易新闻 查看精彩图片

4.生成表情包动图

打开网易新闻 查看精彩图片