🐌 蜗牛AI
← 返回 AI 资讯
科技👁 0

微软完成 SOTA 基模 MAI-Base-2 预训练,性能强于所有参测开源权重模型

微软完成 SOTA 基模 MAI-Base-2 预训练,性能强于所有参测开源权重模型
IT之家 10 月 16 日消息,Microsoft(微软)当地时间昨日宣布,其已经完成了新一代 SOTA 基础模型 MAI-Base-2 的预训练工作。这一模型 在性能方面强于所有参测开源权重模型 。 MAI-Base-2 总参数规模达 2.8T,活跃参数规模 80B,在 6,000 个 NVIDIA GB200 GPU 上历经 38 天训练而成。在整个训练过程中,该模型平均浮点算力利用率为 21%、有效吞吐量为 89%。 根据微软的说法, MAI-Base-2 的预训练算力效率是 DeepSeek-V4-Pro-Base 的 4~12 倍 。 微软表示,三项举措对于 MAI-Base-2 …

以上为资讯摘要,完整内容请访问原文网站。

阅读原文 →