打开网易新闻 查看精彩图片

打开网易新闻 查看精彩图片

杀手锏「人脸模型」直击人物一致性难题,AI影视制作会有大变革吗?

作者 | 马晓宁

编辑 | 陈彩娴

拖更的Sora终于发布了,悬着的心也终于可以死了。

发布前,大家都在想Sora可能会有碾压性的表现,发布后在小红书上搜索“Sora”,吐槽声一浪一浪的,看得人一愣一愣的。一句话总结,不如国产。

比如“归藏2079”发布的视频中,同样的提示词下,显然可灵AI生成的视频更符合要求:

可灵AI发布半年来一路狂飙,不仅模型效果非常稳定,还在持续推出新的杀手锏,为不同行业提供了新机会,不断带来新的市场价值。

01

“人脸模型”攻克一致性难题,人人都能演大片

钢铁侠马斯克大家见得多了,但是打哥斯拉的钢铁侠就比较少见

 可灵AI解锁新神器,视频创作到达了一个新level
打开网易新闻 查看更多视频
可灵AI解锁新神器,视频创作到达了一个新level

在外星跳舞的马斯克可能是从未来穿越回来的

 可灵AI解锁新神器,视频创作到达了一个新level
打开网易新闻 查看更多视频
可灵AI解锁新神器,视频创作到达了一个新level

建筑工人马斯克,难道来自于首富破产的多元宇宙?

 可灵AI解锁新神器,视频创作到达了一个新level
打开网易新闻 查看更多视频
可灵AI解锁新神器,视频创作到达了一个新level

实际上,这些视频都是由AIGC创作者「温维斯Wenvis」使用可灵AI最新推出的AI定制模型(人脸模型)功能制作。据说,全程只花了两个小时,作品发表在推特上之后,甚至还得到了正主马斯克的点赞。

作为全球首个真正落地的AI定制模型功能,它成功解决了一直以来AI视频生成中的“人物一致性”难题,从内测起就受到用户热捧。

如果马斯克这张脸从左转到右就认不出来,那么视频的真实感和吸引力将大打折扣,观众也可能会因为明显的虚假画面而失去兴趣,这无疑限制了创作者的表现空间。

随着这一功能AI视频面部一致性技术有望在更多领域得到广泛应用。特别是在电影、电视剧和广告等视频内容创作中,这一技术能够帮助制作团队更高效地生产高质量的内容。

同时,不少AI视频创作者的灵感,也被可灵AI的人脸模型功能激发了出来。比如「MoRii.Chen」手搓的这个MV:

 可灵AI解锁新神器,视频创作到达了一个新level
打开网易新闻 查看更多视频
可灵AI解锁新神器,视频创作到达了一个新level
AI视频未来可期,马克斯独占半壁江山

可灵AI定制模型,还成功降低了入门门槛。用户只要在可灵AI上,上传几段清晰的人物视频,就可以自助训练人脸模型。

完成训练后,用户可使用炼成的人脸模型进行文生视频,和其他AI视频相比,这种方式生成的单个镜头中的人脸会更稳定更清晰。

打开网易新闻 查看精彩图片

只要你愿意,所有大片主角都是你

这一功能的推出,基于可灵AI对视频内容创作需求的深刻理解和技术创新。

此前,大模型进行文生视频具有较强的随机性,同样的文字描述,两次不同的视频生成的主体,往往会产生一些不小的差异(例如:生成一个包含某个中年男性面孔的视频),这让用户难以完成连续的故事创作。

对于AI视频创作而言,一套成熟人脸模型功能的出现,解决了传统文生视频中常见的面部特征不一致问题,意味着可以轻松打造具有连贯性的固定人物角色系列视频,包括有人物发展和剧情线的短剧,极大地丰富了内容创作的可能性。

在影视制作和广告营销领域,“人脸模型”也展现出了巨大的潜力。

广告的重要目标是创造强力的记忆点与个性化内容。“人脸模型”技术允许根据品牌的特定需求和受众特点进行精确调整,创造出与产品或服务高度契合的虚拟形象。

这些虚拟形象不仅在外形上与品牌理念产生共鸣,而且在表情和动作上也能体现品牌个性,从而加深消费者的品牌印象。相比于真人模特的选择过程,“人脸模型”的使用更加灵活高效,减少了选角时间和成本,同时提供了更广泛的创意空间。

打开网易新闻 查看精彩图片

上传几段视频即可自助训练人脸模型

打开网易新闻 查看精彩图片

自由生成大片质感视频

AI定制模型技术的逐步成熟和广泛应用,也会引发传统影视和广告的制作模式的变革。

例如,以往真人演员在绿幕影棚中进行拍摄,场景则依赖后期合成技术完成。制作不仅受物理条件限制明显,拍摄成本也较高。

在推倒了“ID一致性”这座大山之后,AI虚拟形象可以无缝融入各种奇幻、科幻或超现实的场景之中,为视频制作带来了前所未有的灵活性。

创作者不再受制于实体环境或真实演员的表现限制,能够自由地将任何想象中的角色置于任意设定的环境中。这种变化不仅简化了制作流程,还大大扩展了创意的边界。

有了这个杀手锏,也能更好的发挥AI视频原本的优势,比如制作周期缩短,加快了从构思到成品的速度;降低了对专业场地、服化道等方面的依赖,节省了大量资金。

此外,除了给专业机构视频生产提效,还因为降低了技术和成本门槛,进一步加速个人AI影视创作者的崛起。AI内容创作领域,迈入了一个更加发展阶段。

02

“AI试衣” 让你再没有买家秀的烦恼

现在,演员可以生成了,要是你对剧情人物穿什么衣服,做什么造型不满意,怎么办呢?

可灵AI最近还推出了强大的AI试衣功能。

经过在可灵AI官网实测,整个AI试衣体验非常顺滑:左边上传自己的照片,右边上传服装图片,点击生成,只需要几秒钟,就能看到自己穿上不同衣服的效果。而且这款产品支持多种衣服类型款式,包括上装、长裙等,同时保留衣服图案、文字花纹等细节,真实度极高。

打开网易新闻 查看精彩图片

轻松一键搞定

实际上,快手早在8月份就已经将其背后的 Kolors Virtual Try-On 项目发布在HuggingFace Space上,当时就吸引了大批国内外网友试用玩梗。

给自己试衣服算什么,会玩的人总有一些新idea。有些人让林黛玉穿上了巫师袍,摇身一变当上了霍格沃茨的学生;有些粉丝给自己偶像换造型,呼吁制片方关注争取新角色;还有些人给总裁家的王妈试衣服,体验一把豪门生活。

打开网易新闻 查看精彩图片

叫蒙娜丽莎也改改风格吧

现在在HuggingFace上,Kolors Virtual Try-On技术已经有了5000+点赞量,充分展现了该项目的魅力。

同时,在商业化方面,AI试衣功能也有非常直接的落地场景。每次网购买衣服之前,用户可以先在屏幕上用自己的照片试穿一下新衣服,再没有买家秀的烦恼,那退货率不得大大下降?

可灵AI的试衣功能,其实不止可以帮助电商平台和在线服装商店提供虚拟试衣服务,提升用户购物体验,减少退货率,而且在营销、推荐上也广泛适用。

用户通过将虚拟试穿的图片分享在社交媒体上,增加互动和参与度,通过各种社交渠道帮助服装款式和品牌商家破圈。品牌商家也可以用户这项技术,在更多线上和线下场合中发起推广活动,比如可以在线下搞无实物快闪,让消费者体验新款服装。

以前举办一场时装秀,是只属于大牌服装品牌和知名设计师的权利,现在,再小的品牌和设计师都能办得起自己的时装秀了。通过虚拟模型展示服装,让时装秀不受物理空间和时间的限制,可以在任何时间、任何地点、任何环境进行展示。这使得小型品牌和独立设计师能够更加灵活地安排时装秀的时间和观看方式,成本低至几乎不存在。

如果可灵AI的试衣功能可以用在时装秀上,那么每个观众都有机会轻松穿上走秀的服装,效果如何,一眼便知。

每个人都可以拥有一个自己的服装管家,帮助找到最适合自己的穿搭风格,每天都能提醒自己穿什么衣服,如何搭配衣服。

服装营销也能更精准地找到最适合的用户,提供个性化的服装推荐。

个性化的推荐,甚至会带来个性化的设计、个性化的C2M生产,从生产到销售的整个链条可能会迎来新的变化。

AI视频带来的未来世界,是一个可以被想象塑造的世界。无论是影视行业,还是服装行业,都在AI浪潮下面临着新的机会。

离开优必选的日子

达摩院前传:那些帮淘宝赚过大钱的AI科学家们

“非洲很多行业快被中国人卷死了”丨《鲸犀》百万爆款文