DeepSeek V3

DeepSeek V3 是深度求索(DeepSeek)于 2024 年底发布的大语言模型,以 MoE(混合专家)架构在较低训练成本下达到前沿水平。

亮点

• 参数庞大但每次激活专家少
• 采用 FP8 训练与 MLA 注意力
• 高性价比引发行业震动
• 权重开源、可本地部署

意义

以开源权重与极低训练/调用成本,挑战闭源前沿模型的经济性假设。