一场改变格局的发布会
2026年4月,Meta发布了Llama 4 405B。在发布会上,扎克伯格展示了一张对比图:Llama 4 405B在MMLU、HumanEval、GSM8K等8个基准中,有4个超过了GPT-5,2个持平,2个略低。
台下一片哗然。一个开源的、可以自己部署的模型,追上了全球最强的闭源模型?但三个月后,当开发者真正把Llama 4部署到生产环境时,他们发现了一个截然不同的故事。
“基准追上"不等于"实际追上”
我们对比了Llama 4 405B和GPT-5在真实业务场景中的表现,差距比基准数字显示的要大得多。
代码能力:在HumanEval上,Llama 4得分94.1%,GPT-5得分96.3%,差距仅2.2个百分点。但在真实的代码重构任务中,Llama 4的完成率(需要人工判断"修改是否可用")仅为GPT-5的72%。原因在于Llama 4在函数级任务上很强,但在多文件、上下文理解、指令遵循上明显弱于GPT-5。
指令遵循:这是开源模型最大的软肋。在IF-Eval(指令遵循评测)上,GPT-5得分92.4%,Llama 4得分78.2%。当你要求模型"用JSON格式输出,字段名为snake_case,不要包含注释"时,GPT-5能严格遵循每一条约束,而Llama 4经常"走样"。
开源模型的三个优势(闭源无法替代)
但开源模型有三个闭源模型无法替代的优势:
数据隐私:金融、医疗、政府等行业,数据不能离开自有服务器。自部署的Llama 4或DeepSeek V3是唯一选择。
定制化:你可以用自有数据微调开源模型,使其在特定领域超越任何通用闭源模型。一个在10万份法律合同上微调的Llama 4,在法律文档理解上可以轻松超越GPT-5。
总拥有成本:对于高吞吐量场景(每天100万+调用),自部署开源模型的总成本远低于API调用。DeepSeek V3的API已经够便宜了,但如果你自己部署,成本可以再降50%以上。
选择的智慧:不是"哪个更强",而是"哪个更适合"
闭源模型(GPT-5、Claude 4 Opus、Gemini 3 Ultra)适合:需要最高质量输出的场景、快速原型开发、小团队、不想维护基础设施。
开源模型(Llama 4、DeepSeek V3、Qwen 3)适合:数据隐私敏感场景、高吞吐量场景、需要深度定制化的场景、预算敏感的场景。
2026年的现实是:开源模型和闭源模型的差距在缩小,但不会消失。 差距不再体现在"能不能做",而是"做得有多好、多稳定、多可控"。对于80%的应用场景,开源模型已经足够好。对于剩下20%的高要求场景,闭源模型仍然值得付费。