金融界2025年5月13日消息,国家知识产权局信息显示,深圳市智慧城市科技发展集团有限公司申请一项名为“基于路由技术的大语言模型高效混合推理方法、设备及存储介质”的专利,公开号 CN119961424A,申请日期为 2025 年 4 月。
专利摘要显示,本申请公开了一种数据处理,涉及基于路由技术的大语言模型高效混合推理方法、设备及存储介质技术领域,所述基于路由技术的大语言模型高效混合推理包括:若接收到用户请求,确定所述用户请求与缓存库中各历史请求之间的相似度;若不存在所述相似度超过相似度阈值,基于准确率评分模型确定各待选处理模型的评分指标,所述评分指标包括准确率、响应时间以及接口费用;根据所述评分指标确定各所述待选处理模型的综合得分;根据所述综合得分于各所述待选处理模型中选取目标模型,并将所述用户请求路由至所述目标模型。本申请达成了优化大语言模型的选择以实现用户请求的高效响应的技术效果。
天眼查资料显示,深圳市智慧城市科技发展集团有限公司,成立于2018年,位于深圳市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本424000万人民币。通过天眼查大数据分析,深圳市智慧城市科技发展集团有限公司共对外投资了16家企业,参与招投标项目798次,财产线索方面有商标信息51条,专利信息178条,此外企业还拥有行政许可18个。
本文源自:金融界
作者:情报员
热门跟贴