国家知识产权局信息显示,华为技术有限公司申请一项名为“大模型推理方法、计算设备、存储设备及异构推理系统”的专利,公开号CN122797705A,申请日期为2025年3月。
专利摘要显示,本申请提供了一种大模型推理方法、计算设备、存储设备及异构推理系统,涉及人工智能技术领域。该方法应用于包括处理器和存储组件的异构推理系统且存储组件具备计算能力,其中,处理器确定推理请求的执行策略,并由处理器和存储组件按照执行策略共同执行推理请求。在这一过程中,处理器根据存储组件的内存负载及时调整执行策略,由处理器和存储组件按照调整后的执行策略继续共同执行推理请求。通过这种方式,能够在大模型推理过程中合理分配计算资源,及时释放存储组件的存储空间来提升系统的资源利用率,适应不同推理需求,令大模型处理长序列或批量处理输入序列时也能够快速输出推理结果,提升了推理吞吐量和推理效率。
天眼查资料显示,华为技术有限公司,成立于1987年,位于深圳市,是一家以从事计算机、通信和其他电子设备制造业为主的企业。企业注册资本4114113.182万人民币。通过天眼查大数据分析,华为技术有限公司共对外投资了51家企业,参与招投标项目45573次,财产线索方面有商标信息14566条,专利信息130105条,此外企业还拥有行政许可1732个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
热门跟贴