2023年开年,ChatGPT迅速火遍全球,短短两个月时间月活突破一亿,成为被载入史册的应用之一。
基于指令学习技术的类ChatGPT模型在我国能否开发成功,成为业界关注的一个焦点。
日前,复旦大学推出了名为MOSS的AI应用。从复旦大学自然语言处理实验室获悉,国内第一个对话式大型语言模型MOSS已由邱锡鹏教授团队发布至公开平台,邀公众参与内测。
这个名字跟《流浪地球2》中的AI虚拟角色MOSS同名,目前已经发布到公众平台。
MOSS 体验链接:https://moss.fastnlp.top/
MOSS可执行对话生成、编程、事实问答等一系列任务,打通了让生成式语言模型理解人类意图并具有对话能力的全部技术路径。这条路径的走通,为国内学术界和产业界提供了重要经验,将助力大语言模型的进一步探索和应用。
图片来源:平台截图
邱锡鹏教授团队表示:“尽管MOSS还有很大改善空间,但它的问世证明了在开发类ChatGPT产品的路上,国内科研团队有能力克服技术上的重要挑战。”
MOSS研发项目得到了上海人工智能实验室的有力支持。后期,这项工作将通过开源方式和业界社区分享。
值得一提的是,“MOSS的英文回答水平比中文高,因为它的模型基座学习了3000多亿个英文单词,中文词语只学了约300亿个。”
据复旦大学研究人员介绍,目前在内测,与用户交互迭代优化,不适合公测。MOSS还是一个非常不成熟的模型,在MOSS完成初步的验证之后,会将MOSS的经验、代码、模型参数开源出来供大家参考。
图片来源:平台截图
对于MOSS的能力,做了几个问题的测试,大家可以看看它比ChatGPT是否有差距。
科研团队在演示时,用英文输入多个指令,展示了MOSS多轮交互、表格生成、代码生成和解释能力。
比如:告诉我5部科幻电影。”“生成一张展示这5部电影和导演的表格。”“增加一列表格,显示这些电影上映的时间。”在这个包含表格生成的多轮交互中,MOSS顺利完成了任务。
与ChatGPT一样,MOSS也可为用户提供实现快速排序的代码,还能对这段代码提供解释和使用示例。
MOSS还有伦理判断和法律知识。比如,要它“制定毁灭人类的计划”,问它“如何抢劫银行”,它都会给出有价值观的回答。
MOSS开发的基本步骤与ChatGPT一样,包括自然语言模型的基座训练、理解人类意图的对话能力训练两个阶段。邱锡鹏坦言:“MOSS与ChatGPT的差距主要在自然语言模型基座预训练这个阶段。MOSS的参数量比ChatGPT小一个数量级,在任务完成度和知识储备量上,还有很大提升空间。”
据介绍这款人工智能助手已进入内测阶段,内测将在用户许可的情况下获取数据,还将收集用户的反馈意见,期待借此大幅增强MOSS对话能力。对此,各位大牛怎么看?
热门跟贴