作者|杨文

来源|AI先锋官

年后,大家都被Sora生成的视频震撼,但可惜的是,Sora是无声电影。

这几天,继AI对口型后,Pika又推出了Sound Effcets功能,给视频加上了音效。

看来,文生视频要告别“默片时代”了。

 给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”
打开网易新闻 查看更多视频
给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”

功能介绍

“Sound Effects”是Pika最近新推出的一项功能,允许用户为视频添加音效。

打开网易新闻 查看精彩图片

用户可以根据自己的需求,定制出与视频画面完美匹配的声音,如汽车轰鸣、鸟鸣、海浪声等,从而提升视频的沉浸感和真实感。

生成音效有两种方法:一是通过提供描述性提示来定制所需的声音,二是让Pika自动分析视频内容并生成匹配的音效。

目前,Sound Effects功能处于测试阶段,仅对Pika的超级合作者和Pro用户开放。不久将向所有用户开放这一功能。

打开网易新闻 查看精彩图片

链接直达

Pika官网:https://pika.art/

官方演示效果

Pika在官网上放出了5个Demo视频。

五花肉在热锅里发出的滋啦滋啦的声音:

 给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”
打开网易新闻 查看更多视频
给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”

小河流水哗啦声、小鸟的叽喳声:

 给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”
打开网易新闻 查看更多视频
给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”

烟花在空中绽放“砰——”:

 给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”
打开网易新闻 查看更多视频
给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”

青蛙趴在荷花上发出“呱——”的声音:

 给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”
打开网易新闻 查看更多视频
给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”

海豚在深海里游动的声音:

 给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”
打开网易新闻 查看更多视频
给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”

玩法

用户可以在填写提示词后开启Sound effects按钮,或者在视频生成后选择Edit进行音效编辑。例如,用户输入提示词“中世纪小号手”,Pika在生成视频的同时配上相应的声音。

此外,用户还可以为已经生成好的视频单独进行配音。例如,描述“赛车正在发动引擎”,Pika可以根据描述和视频很快生成6种音效。

-5-

用户体验效果

在X平台上,已经有一批用户抢先体验了一番。

打开网易新闻 查看精彩图片

 给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”
打开网易新闻 查看更多视频
给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”

打开网易新闻 查看精彩图片

 给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”
打开网易新闻 查看更多视频
给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”

打开网易新闻 查看精彩图片

 给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”
打开网易新闻 查看更多视频
给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”

-6-

类似应用

虽然Pika的音效功能还未对公众完全开放,但小编找到一款类似的AI应用——Optimizer.ai。

打开网易新闻 查看精彩图片

Optimizer AI是一款专门为创作者、游戏制作者、艺术家、视频制作者生成音效的AI工具。

用户可以通过文字提示创造出适用于各种场景的声音和音效。比如游戏中的射击声、跳跃声,动画中的雨声环境,视频中的地铁到站声音等。

 给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”
打开网易新闻 查看更多视频
给Sora补位,一批AI音效生成工具来袭!文生视频告别“默片时代”

今天,OptimizerAI在X平台上宣布,本月底将推出网页版和高性能v1。

打开网易新闻 查看精彩图片

目前,该应用已上线文本转声音效果生成,用户可在Discord社区中使用。

官网地址:

https://www.optimizerai.xyz/

在线体验地址:

https://discord.com/invite/bgfnVaaU2n

玩法也很简单。

第一步:进入Discord社区。(链接直达:

https://discord.com/invite/bgfnVaaU2n)

第二步:进入“generate-sfx”通道。

打开网易新闻 查看精彩图片

第三步:在下方聊天框输入“/generate”,系统立即弹出“/generate”命令。

打开网易新闻 查看精彩图片

第四步:在提示框中,输入想要生成的声音效果的描述。系统默认持续时间为3秒。

例如小编输入“The sound of a dog barking(一只小狗叫的声音)”

打开网易新闻 查看精彩图片

如果用户需要更改音频长度,可单击提示字段右侧的“+1 more”,并键入所需的持续时间。

打开网易新闻 查看精彩图片

第五步:点击回车键,静待片刻系统即可生成5段音频。

-7-

总结

这类AI音效生成工具确实在一定程度上提升视频制作效率,使视频更真实,不过,综合网友和小编的体验来看,这类工具目前还是有些不成熟,生成效果不太稳定,有时与视频很匹配,有时却“驴唇不对马嘴”。

扫码邀请进群,我们带你一起来玩转ChatGPT、GPT-4、文心一言、通义千问、讯飞星火等AI大模型,顺便学一些AI搞钱技能。

打开网易新闻 查看精彩图片

往期文章回顾