←新闻详情

邵猛更新于 11月5日 18:31

百度开源 ERNIE 5.5 Flash Base,280B 参数 MoE 架构

百度开源发布了 ERNIE 5.5 Flash Base

AI 导读

百度开源发布 ERNIE 5.5 Flash Base,这是一个 MoE 架构模型,总参数 280B、每 token 激活 14B。Baidu Research 称其在同尺寸下已达到 SOTA,并预告完整版 ERNIE 5.5 Flash 即将推出。转发者指出其 benchmark 对比的是同参数量级模型而非各家最新版本,并列出 DeepSeek-V4-Flash-Base 对应 V4.1-Flash-1017、Hy3-preview-Base 对应 Hy4、MiMo-V2.5-Base 对应 MiMo-V2.6-Flash 供参考。

推荐理由

AI 评分 67

百度开源 280B/A14B 的 MoE 模型,作者补充了同参数量级各家最新版本的对照,便于判断这一定位的实际位置。

主题

标签

引用

Baidu Research

@BaiduResearch

ERNIE 5.5 Flash Base 现已开源——这是一个 280B 参数的模型,每 token 激活 14B,并且它已经在其尺寸级别上达到了 SOTA! 而这仅仅是开始——完整的 ERNIE 5.5 Flash 即将到来。👀

查看原文

ERNIE 5.5 Flash Base is now open source — a 280B-parameter model with 14B active per token, and it already matches SOTA at its size! And this is just the start — the full ERNIE 5.5 Flash is on its way. 👀

查看原帖

正文

百度开源发布了 ERNIE 5.5 Flash Base

一个 MoE 架构模型,280B/A14B 参数

不过 benchmark 对比的怎么都不是各家最新模型呢?原来是因为想对比同参数量级,好吧,还是把各家最新模型列出来,方便大家参考。

DeepSeek-V4-Flash-Base -> V4.1-Flash-1017 Hy3-preview-Base -> Hy4 MiMo-V2.5-Base -> MiMo-V2.6-Flash

来源

邵猛