有人最近看了牛来吗,

热度突然高得有点离谱,8月5日上映,前十来天票房据说就七千多,全网一玩梗,几天之内又从几乎归零拉到千万级,我只能说现实世界还是太魔幻了,电影都拍不出来这反转。

说实话,如果不玩梗,只看画面,真的对眼睛不是那么友好,金黄母牛,圆得像球的树冠,小牛犊,绿蛇,有点像没贴材质、没渲完的3D作业。。。

于是我跑去updream,打开这周一刚上的预演台,用白模搭了一版牛来里的场景,复刻了一模一样的机位、走位、树和牛的前后关系,然后把这段白模录像丢给Seedance 2.5,结果是这样的。

舒服多了,我只能说。

怎么说呢,我对牛来的感受其实很复杂,一部国产动画,能做成这样被全网看见,本身就够离谱了。建模糙、动作僵、像早期练习作业,也确实是真的。可原创的梦想这件事,还是伟大的。有人愿意把那头金黄母牛、那片圆树,从零做成一部电影送进院线,这比我在updream的预演台里拖两下机位要耗时间不知道多少倍。

但我个人觉得,牛来就像一份被提前打开的白模。它让所有人看见,空间和材质一旦没被渲完,坐在屏幕前真的是有点难受的。

这也是我为什么今天我突然想写写updream的预演台。

7月底我刚写过Seedance 2.5,当时就说过它还推出了白模参考的功能。

无纹理的3D模型可以拿来控空间结构、主体姿态、运动轨迹和镜头机位,光影还能根据这些空间信息合理的生成出来。对会Blender的人,这事儿几乎是开挂。以前你要等渲染吐一帧,现在白模丢进去,看效果快了不知道多少倍。

不过对我这种没怎么学过建模的人,以前这条路基本等于没路,去年还参加了渲染大赛来着,结果就搓出了20%,所以我看着Blender里面那些要自己手搓的老艺术家工具,还是有点望而却步的。

但用上AI就不一样了,它根本不需要用那么精细的白模。那做白模的话,updream好用很多,像我这种没怎么学过建模的人,在预演台里也能搭出想要的场景和运镜。如果说刚刚上面牛来的镜头看起来只有一个景、两个人物,可能难度还没那么大。但我要是告诉你,我这个3D小白甚至可以半小时就搓出来十几个人物来重现一个经典的电影镜头呢?

不用开任何3D软件,不依赖Blender我要原地360度点赞,在updream新建一个项目,右键新建预演台并打开,

打开网易新闻 查看精彩图片

进入预演台后在左侧工具栏、创建场景、上传场景最多三张参考图,

打开网易新闻 查看精彩图片

我这里选的是一张19世纪英国伯明翰街道场景图,街道左侧是厂房,右侧是楼宇,画面上空有连接左右两侧建筑物的一个全包围连廊、电线等元素。

打开网易新闻 查看精彩图片

3分钟后,你就会得到这样一个白模。

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

只要一张场景参考图,概念图、气氛图、网上抠的静帧都行,updream都会自己把空间结构解析出来,吐一个带深度的3D白模。层次、比例、遮挡,基本能还原到你能开始调度的程度。

我自己用下来,白模生成效果是我目前用下来体验最好的,这精细度已经够我让AI开工了。

我再来展开讲讲,现在用于视频生成的白模参考,分为粗粒度白模和细粒度白模,

粗粒度白模主要用于提供动作、动线、站位、运镜、切镜、光影和声音等时序信息(也就是上面我通过一张图3分钟生成的白模),细粒度白模则是已经具有完整结构,主要用于材质、色彩、人物、场景和视觉风格的重渲染。

用人话就是,

粗粒度白模是给AI看空间关系、运镜、站位等信息的参考素材(这些内容非常难用提示语来描述)。细粒度白模其实就是把AI视频模型当成渲染器,直接渲染。

有意思的是,恰巧这两者都可以在updream上玩儿,我们既可以自己一键自动生成粗粒度白模(免费的),也能将手里的细粒度白模上传到updream。对于我这种没怎么系统学过建模的人,粗粒度已经够用了。

回到我们的预演台,当我们完成场景创建后,就可以开始添加人物模型,

打开网易新闻 查看精彩图片

模型中就会出现一个人物模型,可以用xyz轴调整人物站位,

那在这个case里,我需要的人物相对来说会比较多一些,所以我就简单点了345678910次新建人物(手搓足球队),然后用移动工具调整调整调整了一下站位,

打开网易新闻 查看精彩图片

把人物站位整理成这样,为了让大家看的清楚一些,我把颜色简单修改了一下,

然后我们可以看到右侧工具栏分上下两个部分,上半部分是场景图层,每一个在模型中的物体、人物都会整理起来在这里出现,大家可以理解为ps里的图层,后面需要删除、锁定object时,都在这里操作。

这里还有一实用的操作,就是目前在模型视角里移动场景物体,只能选中单个物体移动,而一个场景中,往往有超过30个点单独物体模型,比如我的模型中,就有48个,那这个时候如果想微调移动场景模型,一个一个移动几乎是不可能的事情了,因为这里不仅涉及了移动这一个动作,还得调整方向、角度、对齐等等工作要完成,这要是一个个挪就有点太呆了。

所以我们就可以在图层中选择一整个组,就可以实现整体移动。

右侧下半部分是一个属性面板,根据你选择object的不同,功能也会产生不同的变化,那比较常用的就是人物属性和摄影机这两个面板,

人物属性面板中有一个比较实用的工具是基础姿势,大家可以根据自己的需求去调节,

再一个是相机面板,当我看到这个相机面板时还是蛮惊讶的,不仅仅是角度、位置能调整,焦距、相机款式、镜头类型甚至是光圈,都可以根据自己要求做很精确的设定。

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

OK,那当人物进入模型后,下一步就是让他动起来,选择想要移动的人物添加入时间轴, 然后点击绘制轨迹,描绘出想要移动的路径添加人物的动作就可以了。

接下来就是摆机位,可以直接选好你想要拍摄的画面,然后从当前视角创建机位,就可以完成机位创建,一段视频中需要几个机位就点几次就可以了,每个机位都可以单独导出一段运镜视频,这样在一个空间内容录制的不同机位,空间一致性肯定是很稳定的。

打开网易新闻 查看精彩图片

那具体的机位调整以及倒入时间轴的方法基本与人物调整的方法一致,这些我就不再重复了,那如果需要一些特殊镜头,比如从俯拍满满变仰拍,就可以通过关键帧来设定,先定好首帧与尾帧的相机位置和拍摄角度,利用关键帧和尾帧的相机位置后,就可以了。

打开网易新闻 查看精彩图片

然后就是白模录制、进入画布、引用录制好的白模节点、然后视频生成,

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

我一共做了三个机位,提示语中几乎没有写关于镜头如何运镜的描述,全部都是渲染的人物和场景细节,最后出来的结果每个机位的运镜都和我录制的白模视频匹配上了。

所以到这可以看出白模好用的地方其实很明显,

效果更精准,空间更合理。

你脑子里其实知道机位在哪,人从哪走到哪,树挡不挡脸,推近的时候地面会不会穿帮。可你一旦写成提示语,等于做了两遍翻译。

第一遍,你把空间翻译成文字。第二遍,模型把文字再翻译回画面。每遍其实都会多多少少丢掉一点信息,生成之前,基本都是抱着盲盒的心态。

举个例子,我用同一条提示语,一版带着我在预演台里录的白模参考,做出来是这样的。

一版纯文字直出,效果出来是这样的。

可以看到,文字指出的拍摄方向和参考白模的拍摄方向是完全相反的,人物的位置关系也是相反的,

这就跟我们刚刚说的一样,模型在理解你的提示语时,需要猜测你的意图,而在猜测的过程中就很容发生所谓的误解,导致生成出来的画面跟你想要的东西多少会有一些不一致。

尤其是在这种你本可以通过白模去固定好拍摄方向、拍摄角度以及运镜方式的情况下,那肯定是你搭好了白模再去生成,这样的话会更稳、更省积分。

看完这两条,我觉得白模锁定的是位置和空间关系。只有这两个对了,后面的光、材质、风格才会合理。如果一开始位置就错了,提示词写得再长,也是白搭。

当然,简单镜头不必硬上白模。

像这种两个人坐着聊天,一个我想宣传的蛋糕静静放桌上,运镜本来就很老实,纯文字加一张参考图就够用了,

打开网易新闻 查看精彩图片

你要是每个镜头都先搭白模,反而制作速度会变慢,也没必要。但你要是每次都靠纯文字碰,钱和时间又会花在模型没听懂的结果上面。

真正值得放到预演台先搭一遍的,是那些空间关系和运镜一错这段就不能用了的镜头。

我也总结了几个我觉得比较适合使用白模的场景,

比如影视作品里面的大场面空镜。

你要一条走廊推进、一片草地摇过、一座城市从高处落下来,白模先把空间和轨迹钉死,模型再去根据图片去生成视频,比你在提示词里写运镜缓慢推进、保持水平靠谱,这种搭了白模一次就搞定,而且一致性还好。

就像我这个科幻作品里面空间站展示的镜头,我需要展示这个空间站与地球之间的位置关系,然后还要展示它运转细节的镜头,还要再展示一个逐渐拉远的远景镜头。

我只用把几个景别和运镜的白模搭好,一次性生成就搞定了,完全不用反复抽卡,Seedance 2.5本身就不便宜,这样做真的很省积分。

再就是像刚刚我们教程里展示的,影视作品里要用到有运镜和切镜的人物大场面用白模也合适。

谁从画面左边进,机位什么时候切到侧拍,人群和主体的遮挡怎么走,这些用文字描述,模型经常听一半丢一半。白模里拖一遍走位,再切两个机位,组接起来比反复改提示语快。

品牌广告里那些复杂运镜更是。

产品绕一圈、镜头从地面开始逐渐旋转展示、人物和道具如何在空间里互动,每个人物在道具的哪个位置做什么动作,你用文字对半天也对不齐。先在白模里把这条曲线录下来,再渲,返工会少很多。

就像我现在做的这条吹风机的广告,你要让我一个一个描述这些人物在哪个位置,再对吹风机做出哪些动作,然后在哪里切镜头,其实要通过文字去描述会非常长,而且你还不知道它是否能够准确地呈现出来。

但我如果在updream里面搭一个吹风机的模型,然后把人物摆一摆,做一个空间轨迹的运动,这些东西就一次搞定了。这些白模镜头组在一起,比纯文字提示语更快也更稳。

一个白模镜头也许只解决一个空间问题,但你在这一个具体空间里各录几条展现不同画面角度的白模再组起来,整段片子的空间就不会东倒西歪了。

我有时候会想起以前拍东西,再穷的组也知道先走一遍场。哪有灯,哪能站人,摄像机从哪滑到哪,先在现场比划清楚,再开机。

在不会自己搭建白模之前,你把空间和运镜全塞进一段文字里后,就是等待打开AI视频生成黑箱的过程。

但现在有了能参考白模的Seedance 2.5,还有了没啥门槛的updream预演台,

不用会Blender没关系,没做过3D没关系,

只要你心里清楚你的视频想做成什么样,

动动手摆一摆,就都出来了。

所以下次你再为一条镜头狂写提示语之前,先问自己一句。

我写5000字永乐大典一般的提示语能描述清楚这个运镜和空间吗,

不清楚的话,

不如去updream预演台搭一个白模,

把场景生成白模,

把机位运镜划对,

然后录下来,

再交给Seedance 2.5去生成吧,

这比你再叠三十句形容词,

有用得多。

@ 作者 / 卡尔 & 阿汤

最后,感谢你看到这里如果喜欢这篇文章,不妨顺手给我们点赞|在看|转发|评论

如果想要第一时间收到推送,不妨给我个星标

如果你有更有趣的玩法,欢迎在评论区聊聊

更多的内容正在不断填坑中……

打开网易新闻 查看精彩图片