来源:上海证券报·中国证券网

11月26日,在上海召开的“第三届算力网络与数字经济论坛暨2024年‘算力浦江’总结大会”上,跨域异构算力网络实验验证成果发布。

打开网易新闻 查看精彩图片

在上海市通信管理局和上海市数据局的大力支持下,由中国信通院工物所、泰尔英福、同济大学、上海人工智能实验室、上海新型互联网交换中心牵头,联合上海联通、有孚、沐曦、天数智芯、无问芯穹等多家单位,开展了跨域异构算力网络实验验证工作。经过近一年试验探索,通过优化底层异构芯片的通信传输、跨域调度能力以及大模型并行训练策略等。截至目前,大模型异构混训效率可达97.5%,跨域异构混训效率可达90%,有效验证了跨域异构算力网络调度的可行性及效率。