国家知识产权局信息显示,北京趋境科技有限责任公司申请一项名为“一种基于路由引导共享基座的混合稀疏专家推理加速方法及装置”的专利,公开号CN122433897A,申请日期为2026年4月。
专利摘要显示,本申请公开了一种基于路由引导共享基座的混合稀疏专家推理加速方法及装置。所述基于路由引导共享基座的混合稀疏专家推理加速方法包括:根据修正后的最终共享基座专家权重矩阵以及优化后的最终专家到基座投影矩阵对原始预训练MoE模型进行部署,从而获取部署后的MoE混合推理模型;获取用户的输入信息;将用户的输入信息输入至所述部署后的MoE混合推理模型,从而获取推理输出结果。本申请的基于路由引导共享基座的混合稀疏专家推理加速方法在大幅减少激活专家数量的同时,利用共享基座专家对被丢弃专家进行动态补偿,结合Fisher信息加权和共激活感知的初始化策略,在无需基于梯度的微调训练的前提下实现推理效率的显著提升和模型精度的有效保持。
天眼查资料显示,北京趋境科技有限责任公司,成立于2023年,位于北京市,是一家以从事科技推广和应用服务业为主的企业。企业注册资本637.2388万人民币。通过天眼查大数据分析,北京趋境科技有限责任公司共对外投资了3家企业,参与招投标项目1次,财产线索方面有商标信息4条,专利信息10条,此外企业还拥有行政许可1个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
热门跟贴