英伟达光子交换机:AI集群延迟降10%,能效提升5倍
量子计算方面,英伟达正在通过扩展Slurm工作负载管理系统,将量子处理器(QPU)纳入传统超级计算工作流。
Lambda的测试数据显示,改用光子交换机后,机架级网络延迟下降约4%,Pod级网络延迟最多下降约10%,吞吐量则与原来相当;这是快科技11月17日消息中提到的情况。
英伟达方面表示,把光引擎和交换芯片封装到一起之后,光子技术带来的能效提升最高可达5倍,可靠性提升最高可达15倍,激光器用量则降到传统方案的四分之一。
对超大规模AI集群来说,一旦网络出故障,可能让数千颗GPU同时空等数据,整机利用率随之下滑。智能体推理和分布式计算的需求往上走,网络延迟、功耗、可靠性也会越来越直接地影响算力效率。
量子计算这条线上,英伟达的做法是扩展Slurm工作负载管理系统,让量子处理器(QPU)进入传统超级计算工作流。
英伟达透露,最近五年,超级计算中心里部署的量子处理器数量涨了接近7倍;眼下全球有近30家超级计算中心正在部署50多台量子处理器。
不少超级计算中心本来就用Slurm管理CPU和GPU任务,英伟达因此想借扩展Slurm对量子处理器的支持,让研究人员在熟悉的工作流里把经典计算资源和量子计算资源放在一起调度。
这次Slurm更新建立在与
IBM、Pasqal以及量子计算社区此前的合作之上,量子处理器厂商可以通过统一接口接入不同的超级计算中心,省去为每台量子处理器与各套超级计算系统之间反复开发适配软件的工作。
新版本还支持QRMI、QDMI等接口,IBM、IQM、Quantinuum、Pasqal等企业已经采用。Slurm 26.11预计在11月晚些时候发布。
