打开网易新闻 查看精彩图片

文丨林得安

编辑丨周近屿

前不久,我刷到了一支名叫《百匠:纸契灵》的AI短片。这个8分钟的片子情节完整、视效精湛,至今在抖音有四百多万点赞。

后来,我们找到主创聊了聊。导演赵万权和阿生并非影视科班出身,甚至曾经“一个是买水果的,一个是扛布的”。《百匠:纸契灵》是他们用字节跳动旗下的小云雀AI工具“拍”出来的。

作为一个图文内容创作者,我每天都在写故事,脑子里也积攒了很多画面。只是过去,拍摄、剪辑、后期等能力始终是一道门槛,那些画面也一直停留在想象里。

7月31日,Seedance2.5上线。看到这条消息的时候,我想起阿生和赵万权的鼓励,于是打开了他们用的小云雀,想试试看用同样一款AI工具,能不能把脑海里的故事拍出来。

像导演一样创作

“现在AI已经有导演思维了,只要你有内容,其他都可以不太操心了。”前不久,阿生这样对我说。

当时他说的还是Seedance2.0。比阿生更幸运的是,7月底,Seedance2.5正式上线,当我点开模型偏好选项时,小云雀作为首发官方版Seedance 2.5的AI工具,已经可以满血体验Seedance 2.5。

阿生口中的“内容”,我过去听过、写过很多。第一个浮上心头的就是阿生和赵万权的故事。他们“草根”出身,都经历长时间的低谷,也遭遇过背叛。他们如何相识相知,成为创作伙伴,就是一个好故事。

但我发现,对我来说第一个困难不是“有没有内容”,而是我写的是文章,文章不是剧本。文字和视频思路完全不同,想把想象中的画面“拍”,需要设计角色、风格,处理分镜。对着文本输入框,我一头雾水,不知道第一个提示词该怎么写。

好在小云雀是一款agent,我将我的文章和想法发给小云雀,它自动提炼出了人物关系,同时还根据网络上的热点,出了一些其他方案。在选定我要的方案后,紧接着,它把原本文章里的叙述,拆成了一个个影视场景,帮我构思了一个完整的短片剧本方案和分镜。

小云雀已经帮我干了编剧的活,在它的帮助下,我大致知道故事应该用哪些画面呈现。比如我想表达,阿生很长一段时间只能孤独地自己摸索AI视频创作,小云雀将“孤独”具象为:阿生独自守着水果店,收摊后在昏暗灯光下打开电脑,屏幕上AI生成的画面歪歪扭扭。

接着是灯光、美术、置景的活。不像阿生,我没有太多写提示词的经验。过去我也用过一些视频生成模型,但苦于提示词写不清楚,效果差强人意。

不知道怎么准确表达我想要的质感和氛围,我干脆直接上传了20多张图片供AI参考,包括我在现实生活中拍下的环境、道具的照片等等——50个全模态参考素材输入,这也是Seedance 2.5才有的升级,过去,图片的上传数量是9张,视频是3个。

然后它用文生图模型生成了一张风格基准图,和基于此生成的角色、场景资产。

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

我想要写实、电影感的风格,这是小云雀生成的风格基准图和角色四视图。滑动查看全部。

完成前期工作,小云雀开始担任“摄影师”的角色:生成视频。结果确实让我惊奇。我并没有教它要镜头要怎么切换,也没有做任何分镜,只是输入对画面的描写。但就像阿生之前告诉我的一样,Seedance 2.5自己就懂镜头语言,懂如何通过不同的景别和拍摄手法把故事讲出来。

在生成之前,我也担心过镜头与镜头之间剪辑、衔接的问题。但这次我发现小云雀已经一次性直接生成30秒的视频,如果不够,还可以最多延长两次,最长达到了90秒。这意味着每一次生成都可以承载更多表达。

把这处升级分享给阿生这样的专业创作者,他们表示也很惊喜。赵万权一直喜欢写30秒以上的长对话,过去只能直出15秒时,这件事让阿生有些头痛,“30秒的对话里,随着情绪层层递进,位置关系不能改,景别却要不断变化,以前抽5次可能才有一次满意的,现在有了30秒直出,时间成本断层减少。”

我想表达角色眼中的渴望,模型在生成时特写了眼睛,并通过环境的对比突出了氛围

第一次生成了一个短片视频,我意识到,使用AI工具创作并不能被简单概括成“一键出大片”的爽文叙事。

在这个过程中,如果说我是导演,把握故事的整体走向,决定要什么、不要什么,小云雀更像一个能够理解创作意图、帮助快速验证想法、不断协同修改的创作搭档,完成除导演外,灯光、摄影、美术等等执行工作。

告别“抽卡”

AI可以完成执行工作,而人需要做选择、做判断。小云雀新上线的角色功能也让我意识到这一点。

小云雀为我生成的角色图已经超过预期,但毕竟是平面、单一的。过去我在看一些AI短片作品时,也时常觉得人物的脸部细节不足,一做表情就容易“崩”、“假”。如今新升级的模型能解决这一点吗?抱着这样的怀疑,我打开了小云雀的角色功能。

导入我的角色资产后,我选择让小云雀生成一张表情九宫格。通过这张九宫格可以看出,角色的表情较为自然。甚至我还可以框选局部进行编辑。如果只是觉得“不对”,但不知道要怎么调整,小云雀也提供了妆容调节、表情调节的工具,可以更细致的调整,让角色做出更有确定性的表情。

打开网易新闻 查看精彩图片

我框选了部分图片,输入微调需求。

打开网易新闻 查看精彩图片

小云雀的表情调节功能。

除此之外,小云雀还提供角色库,维度横跨中西古今,包括物种、体型、身高、发色等等。是帮助设计个性化角色的工具,也像一个灵感库。

这种能够修改表情微小细节的体验很奇妙。就像传统影视里,导演不会因为演员眉毛不对,就重新找一个演员,只会不断调整。

我还惊讶地发现,也不只有图片可以局部编辑,视频也可以了。过去很长一段时间,我理解的AI生成逻辑都是:生成一个,不满意,重新生成。我想这也是为什么AI短剧行业内都会把这个过程称作“抽卡”。AI生成最大的痛点是不确定性,只是想改一点,就要全部重来。

有一段视频,是两个角色正在讨论剧本,排演动作。其中有一个镜头我觉得焦点有些偏离,想要对焦人物的面部,表现其坚定的神情。虽然这看起来只是很小一点调整,但在过去,没有能力也没有工具可以实现,只能重抽。重抽的问题是,我对目前的动作、位置关系都还满意,新生成的视频很难说会不会保留。

小云雀新上线的片段重拍功能实现了我“不重抽就修改”的愿望。点击片段重拍,我可以细致到每秒每帧做出注释,要求修改。

我在想要调整的地方打上注释。

既然可以保留想要的动作、位置关系,我又有了新想法,改变视频的风格,看看它对风格替换理解的怎么样。

我要求改变风格,生成了一段除了风格变化,其他都不变的视频。

影视创作是需要不断修正、调整的工作,现实生活中不存在一次性拍完一部片子,AI创作或许也如此,需要反复修改、不断迭代。

小云雀推出的片段重拍等编辑修改功能,让创作者可以针对任意时间段的镜头进行修改、编辑,小到去掉画面里一个多余的小物件,大到给画面主体换个颜色。

对我这样的小白来说,让创作的门槛变得更低;而对专业短剧和影视创作者如赵万权、阿生而言,意义更大,它增加了一种更高效、更可控的创作方式,大大消除了“抽卡”的不确定性。

“在不同工具间切来切去很烦”

我也和阿生、赵万权交流了使用Seedance 2.5和升级后小云雀的体验,想知道在专业影视创作者看来,这次升级有怎样的意义。

对他们来说,小云雀的另一个独家功能,3D导演台,也是一个很有意义的功能。它同样让创作变得更精准、高效、可控,“视效可以用导演台做一个白膜发给导演,一看就明白了”。

这次更新后,3D导演台可以套角色动作、使用预设机位或当前视角生成机位,并通过相机位置、FOV、注视点关键帧组织推拉摇移等运镜……整个流程都变得更接近真实影视制作。

下为通过3D导演台做的白模参考视频,上为生成视频。

上一次聊天时,他们还有一个小小的苦恼,是希望小云雀也能接入更多声音相关的工具,这样他们就不用费劲找音效、配音,这一次更新也得到了满足。

打开网易新闻 查看精彩图片

小云雀推出了音频模型Seed Audio 1.0

DataEye最新数据显示,今年1月至5月AI短剧市场规模已突破220亿元,全年有望冲击400亿元大关,国内AI短剧用户在今年上半年突破6亿。业内人士普遍认为,AI短剧已走过试探期,规模化的产业爆发正在发生。

技术进步推动行业发展。Seedance 2.5的诸多能力意味着AI生成视频从过去的输入提示词、随机抽取成片,变成了可控化、工业化的流程,创意可以完整落地,不再被模型随机效果限制。

但模型越来越强,并不意味着创作越来越简单。能力越多,组织能力就变得越重要。模型决定了能力上限,但创作者如何真正使用这些能力?工具正在成为连接模型能力和创作者需求的关键环节。

前不久,AI短剧《被裁掉的女孩》播放破两亿。导演“菲菲飞”称两亿次看见不是句号,《被裁掉的女孩》第二季将于这个夏天和观众见面。《被裁掉的女孩》第二季制作便是与小云雀合作。

“对于我们创作者来讲,老是(在不同工具之间)切来切去很烦的。”赵万权说。这也是他们为什么需要小云雀这样的工具——Seedance 2.5提供了模型能力,而小云雀把这些能力组织成了影视创作能够真正落地的工作流。

同时,小云雀友好的积分和会员方案,也让创作成本越来越低:7月31日至8月6日,小云雀提供Seedance 2.5首发商业化折扣,会员上传参考视频生成 720P成片积分消耗5.4折起。超级会员包包季首充7折,包年叠加优惠。未来会有更多原本停留在脑海里的故事,被拍出来,被看见。

他们一直有一个愿望,是无需切换,在一个工具里完成所有创作需要的流程,输出成片。如今,这个愿望或许可以实现了。

封面来源: 《造梦之家》

【 版权声明】所有内容著作权归属镜相工作室,未经书面许可,不得转载、摘编或以其他形式使用,另有声明除外。

继续阅读: