https://sv.cyol.com/appvideo/svideo/20251113/sv_96b252db08965d1b28c6eb85b839ea9d0fLJB.mp4

文心5.0在多模态理解、指令遵循、创意写作、事实性、智能体规划与工具应用等方面表现突出。百度供图

百度创始人李彦宏会上表示,大模型技术在快速迭代,其智能水平不断突破极限,模型思考时间变长,原生全模态统一,将自我学习和迭代,具备创新能力。“智能本身是最大的应用,而技术迭代速度是唯一护城河。百度会持续投入、研发更前沿的模型,推高智能天花板。”

百度首席技术官王海峰介绍,文心大模型5.0是新一代原生全模态大模型。不同于业界多数的多模态模型采用后期融合的方式,文心5.0的技术路线是采用统一的自回归架构进行原生全模态建模,理解与生成一体化。从训练开始便融合语言、图像、视频、音频等多模态数据,使得多模态特征在统一架构下充分融合并协同优化,实现原生的全模态统一理解与生成。

依托飞桨深度学习框架,文心5.0采用了超稀疏混合专家架构,进行庞大的全模态训练,总参数规模超过2.4万亿,激活参数比例低于3%,在保持模型强大能力的同时有效提升推理效率。同时,基于大规模工具环境,合成长程任务轨迹数据,并采用基于思维链和行动链的端到端多轮强化学习训练,显著提升了模型的智能体和工具调用能力。

目前,文心大模型5.0 Preview已同步上线文心App,用户可直接体验;开发者和企业用户也可通过百度千帆大模型平台,调用文心大模型5.0 API 服务。

此前在11月8日,LMArena大模型竞技场最新排名显示,文心模型ERNIE-5.0-Preview-1022在文本任务评测中位列全球并列第二、中国第一,尤其在创意写作、复杂问题理解等方面表现突出。

来源:中国青年报客户端