金融界2025年1月28日消息,国家知识产权局信息显示,支付宝(杭州)信息技术有限公司申请一项名为“一种分布感知的多阶段大模型微调方法及装置”的专利,公开号CN 119358625 A,申请日期为2024年9月。

专利摘要显示,本说明书实施例提供了一种分布感知的多阶段大模型微调方法及装置。待微调的大模型包括预训练后的骨干网络和预测层在微调方法中,使用数据集中的样本对大模型进行第一训练,得到第一大模型,这里的第一训练包括:更新大模型中预测层的参数,不更新大模型中骨干网络的参数。接着,使用数据集中的样本对大模型进行第二训练,得到第二大模型,这里的第二训练包括:更新大模型中骨干网络的参数和预测层中的参数。这样,即得到了两个训练后的大模型,接着可以在两个训练后的大模型中的对应参数构成的范围内进行参数取值,得到微调后的大模型。数据集中包含隐私数据,在数据处理过程中需要进行隐私保护。

天眼查资料显示,支付宝(杭州)信息技术有限公司,成立于2016年,位于杭州市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本10000万人民币,实缴资本1000万人民币。通过天眼查大数据分析,支付宝(杭州)信息技术有限公司共对外投资了12家企业,参与招投标项目30次,专利信息5000条,此外企业还拥有行政许可56个。

本文源自:金融界

作者:情报员