当前位置: 首页 » 资讯 » 新科技 » 正文

可训练万亿参数大模型 国内运营商最大单集群智算中心运营

IP属地 北京 编辑:周琳 封面新闻 时间:2024-09-01 10:38:27

由中国移动承建的国内运营商最大单集群智算中心8月30日在哈尔滨正式运营,该智算中心具有单集群算力规模最大、国产化网络设备组网规模最大等特点。

单集群智算中心把所有AI加速卡打造成1个集群,用以支持千万亿级参数的大模型进行训练。这个集群智算中心通过先进的智算网络技术把上万块GPU芯片像“积木”一样拼接在一起,大幅提升GPU节点间的通信效率,将数据训练完成时间缩短20%,从而形成超级算力集群。这个单集群智算中心共有超过1.8万张AI加速卡,运算能力达到每秒690亿亿次浮点运算,能满足万亿参数的大模型训练要求。

中国移动黑龙江公司计划建设部项目经理 闫文:它相当于300多万台高性能个人计算机每秒的计算能力,单集群相当于编队,减少互相传输时间,在编队内就把整个计算完成了。

央视新闻客户端

免责声明:本网信息来自于互联网,目的在于传递更多信息,并不代表本网赞同其观点。其内容真实性、完整性不作任何保证或承诺。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。