Meta发布Prometheus超级集群技术细节
Meta工程团队公布了Prometheus超级集群的技术细节。该集群位于俄亥俄州New Albany,目前由数十万GPU组成并作为单机运行,计划扩展至约100万GPU。Meta确认第一阶段已用该集群训练Muse系列基础模型(含Muse Wonder),其中Muse Wonder预训练goodput超过85%、强化学习超过90%。Meta还披露了基于NVIDIA GB200 NVL72的Catalina和基于GB300 NVL72的Clemente两套平台,以及即将到来的Vera Rubin NVL72平台。
匹配字段标题