打开摄像头,对着画面随手一拨,声音就出来了。Google Gemini 官方介绍了 Gemini 4 Argon 的一项玩法:把视频或摄像头画面重新想象成可演奏的合成器。

画面即乐器

打开网易新闻 查看精彩图片

按官方说法,用户可以在 Canvas 中创建交互式音频应用,先设定氛围,然后像演奏乐器一样操作摄像头画面。视频和实时画面不再只是被观看的内容,而成了可以上手拨弄的发声源。

整个流程落在 Canvas 里完成:创建应用、设定氛围、操作画面,三步串起从视觉到听觉的转换。至于具体怎么拨、声音如何生成,官方介绍里没有展开。

把摄像头变成乐器,意味着输入设备不再局限于键盘和旋钮。你眼前看到的画面,本身就是那台待演奏的合成器。