1月20日,澎湃新闻记者获悉,字节跳动旗下豆包与上海浦东美术馆达成合作,成为该馆两项国际大展——“图案的奇迹:卢浮宫印度、伊朗与奥斯曼的艺术杰作”与“非常毕加索保罗•史密斯的新视角”的官方AI讲解员,这是AI产品首次成为美术馆的官方讲解工具。

展览期间,观众可通过豆包App的“视频通话”功能或拍照提问方式,获取针对具体展品的专业讲解,同时,豆包还提供通用和亲子两种解说风格。相关项目负责人介绍,视频讲解功能基于Seed1.8模型的视频理解能力。目前Seed1.8在视频感知、流式、视频理解方面都达到SOTA水平。它不再局限于“拍图、发送、提问,再拍图、再提问”的模式,而是能持续理解观众眼前不断变化的视角和场景,从而实现连续、自然、像人一样的对话交互。(澎湃新闻记者 范佳来)