Omni 1.1 这次更新,把视频生成的玩法往前推了一步:新增视频参考功能,你可以把某个角色或物体"带"进全新的视频画面里,而且保持一致性。
官方放出的演示案例很直观——一个人在两段各3秒的参考视频里做倒立动作,然后被合成到一辆行驶中的法拉利 Luce 上。参考视频以叠加方式展示,生成的画面里,人物动作和车辆行驶状态都保持了稳定。
视频参考到底解决了什么问题?
过去做视频生成,最头疼的就是角色一致性。你让AI生成一个人,换个场景、换个镜头,脸就变了。Omni 1.1 的思路是:先给AI看一段参考视频,让它记住这个角色或物体的特征,再把它插入到新的视频场景中。
从演示效果看,两个关键点值得注意:
- 参考视频只需要3秒,门槛不高
- 插入的角色和物体能保持"一致且准确"
这个功能适合谁用?
对做短视频、广告、影视预演的人来说,这等于省掉了大量重复生成的步骤。以前要保证同一个角色在不同镜头里长得一样,得靠后期修,现在直接给参考视频就行。
对普通用户来说,玩法也更丰富了:你可以把自己的一段视频作为参考,让AI把你放进任何场景——当然,前提是别拿去做违规的事。
技术上的看点
Omni 1.1 这次没有公布底层技术细节,但从功能表现看,它应该是在视频生成模型里加入了参考视频的条件输入机制,让模型在生成新画面时,能同时参考文本指令和视频特征。
这种"视频参考"和之前常见的"图像参考"不同:图像参考只能锁定静态特征,视频参考还能捕捉动态特征——比如人物的动作习惯、物体的运动轨迹。这意味着生成结果不只是"长得像",连动起来的感觉都能对齐。
和同类工具的差距
目前市面上能做视频生成的工具不少,但能把"角色一致性"做到这个程度的还不多。大多数工具要么只能参考单张图,要么需要多次调参才能勉强保持角色稳定。Omni 1.1 直接用视频做参考,等于把一致性问题的解决路径缩短了一大截。
当然,演示视频展示的是理想情况。实际使用中,参考视频的质量、目标场景的复杂程度,都会影响最终效果。但至少从官方放出的案例看,这条路是走得通的。
一句话总结
Omni 1.1 的视频参考功能,让"把角色稳定插入新视频"这件事从手动调参变成了给参考就行。3秒的视频,就能换来一个一致的角色——这个效率提升,对内容创作者来说是真香。
热门跟贴