观点网讯:1月21日 ,摩尔线程与硅基流动联合宣布,双方在MTT S5000上,利用FP8低精度推理技术,完成了对DeepSeek V3 671B满血版大模型的深度适配与性能测试。
据介绍,实测单卡Prefill(预填充)吞吐超4000tokens/s,Decode(解码)吞吐超1000tokens/s,单卡速度逼近国际顶尖产品。
免责声明:本文内容与数据由观点根据公开信息整理,不构成投资建议,使用前请核实。
观点网讯:1月21日 ,摩尔线程与硅基流动联合宣布,双方在MTT S5000上,利用FP8低精度推理技术,完成了对DeepSeek V3 671B满血版大模型的深度适配与性能测试。
据介绍,实测单卡Prefill(预填充)吞吐超4000tokens/s,Decode(解码)吞吐超1000tokens/s,单卡速度逼近国际顶尖产品。
免责声明:本文内容与数据由观点根据公开信息整理,不构成投资建议,使用前请核实。
热门跟贴