DeepSeek 非对称架构:更高智能,更低成本
🧠 Asymmetric architecture. More intelligence, less cost.
AI 导读
DeepSeek 介绍了一种 552B 参数的 MoE 非对称架构,采用新的 Causal Encoder–Decoder,输入仅激活 8B 参数,输出激活 16B 参数。其称新预训练方法与更大规模的 RL 后训练使该架构的基准测试成绩超过包括 DeepSeek-V4-Pro 在内的旗舰模型。
正文
当前显示原文,中文全文译文尚未就绪。
🧠 Asymmetric architecture. More intelligence, less cost.
🔹 552B-parameter MoE. 🔹 New Causal Encoder–Decoder architecture: just 8B active parameters for input, 16B for output. 🔹 New pre-training methods + larger-scale RL post-training deliver benchmark results ahead of flagship models, including DeepSeek-V4-Pro.
2/6