国家知识产权局信息显示,深圳大普微电子股份有限公司申请一项名为“大语言模型推理优化方法及相关设备”的专利,公开号CN121706977A,申请日期为2025年12月。

专利摘要显示,本申请实施例公开了一种大语言模型推理优化方法及相关设备,用于解决高并发场景下完全重复请求导致的推理计算冗余问题。本申请实施例方法包括:响应于接收到推理请求,获取与推理请求对应的请求标识;基于请求标识查询逻辑值缓存索引;其中,逻辑值缓存索引存储有请求标识与逻辑值存储地址之间的映射关系,逻辑值通过对推理请求对应的输入序列执行预填充推理计算得到,逻辑值为对应输入序列末尾位置生成的中间推理结果,并存储于外存中;若逻辑值缓存索引中存在与请求标识匹配的映射关系,则将逻辑值存储地址下发至外存以获取输出词元;基于输出词元生成推理结果。

天眼查资料显示,深圳大普微电子股份有限公司,成立于2016年,位于深圳市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本39259.4724万人民币。通过天眼查大数据分析,深圳大普微电子股份有限公司共对外投资了9家企业,参与招投标项目7次,财产线索方面有商标信息138条,专利信息350条,此外企业还拥有行政许可29个。

声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。

本文源自:市场资讯

作者:情报员