提到AI生成视频
就不得不提起Runway
Runway在2023年2月
开发出 AI 视频生成技术 Gen-1
该技术需要使用者上传文本、
一张图像或者一段视频,
就可以生成该图像风格、
与视频动作相符的动画短片。
官方展示了五种使用 Gen-1 的方法,第一种是风格化,将图像的风格转化到上传的影片中,就会将真人动作转化成全动画的影像,如下方视频示范。
第二种分镜,将视频的构图与物件转化成完全风格化的动画渲染。
第三种遮罩,若只想更改视频中其中一部份,只要写下特定的文本就能针对小部分修改,如下图文本输入「白色皮毛上有黑色斑点的狗」,视频的小黄狗即会转化成斑点狗。
第四种渲染,上传图片或文字提示,将无纹理、无背景的动画草图转化成特定图像的动画短片。
第五种指定画风,上传多张图像或是模型来训练 Gen-1 ,将视频转化成更风格化、更符合需求的动画。
同年6月团队正式发布最新版 Gen-2
使用者只需要写下图片所需的文字描述,
打造出独特艺术风格的视频
runwayml.com/ai-tools/gen-2-text-to-video
除了包含Gen-1的功能,
Gen-2 还有三种额外的应用方式。
1.通过文字生成视频:只需要输入文字描述即可生成各种风格的影像
2.文字+图像生成视频:输入文字并上传图片,AI 会根据图像风格生成视频。
3.图像生成视频:上传图像,即可生成影像
11月Runway再次推出新功能
「Motion Brush 动态笔刷」
使用者可圈选部分画面使其生成动画,
方便后期团队针对视频需求进行创作。
随着各个科技公司纷纷入局
2024年Runway技术大跃进
7月推出Gen-3 Alpha
短时间生成粒子、流体高难度特效
runwayml.com
Gen-3 Alpha 与 Gen-2 相比
在生成视频的逼真度、
一致性和运镜有了重大革新,
它可以理解玻璃镜面反光与倒影,
以及水底世界光线的折射与流动。
只要3步即可生成视频。
1: 尝试输入一个简单的提示,例如「瀑布」。 并描写出场景,最后再写出它的风格与构图。
2:选择要生成的秒数。
3:尝试使用固定的参数维持视频的一致性。
Runway Gen-3效果哇塞
花费也很哇塞
按最便宜12美元/月年费套餐来算,
每个月的积分额度,
只够生成62秒的视频,
相当于每5秒的视频
就要花费1美元,
期待国内AI视频大模型发展
把价格打下来。
-End-
更多免费CG资产
欢迎前往CG模型网下载:
https://www.cgmodel.com/
外包定制需求
扫码或搜索微信号:cgmodel001
添加客服进入微信交流群
QQ交流群:248716879
· www.cgmodel.com · · www.codel.com ·
热门跟贴