美国Meta公司发布AI新模型系列Llama 4,首次采用“混合专家”架构

2025-04-07  美国 来源:其他 领域:信息

关键词:

据大半导体产业网4月7日消息,美国Meta公司发布首次采用“混合专家”架构的全新多模态大模型系列Llama 4。该系列总共有四个新模型:Llama 4 Scout、Llama 4 Maverick和Llama 4 Behemoth,并拥有Scout和Maverick两个版本。其中,Scout版本配备170亿活跃参数、16个“专家”模型及1090亿总参数;Maverick版本同样拥有170亿活跃参数,但“专家”模型数量增加至128个,总参数量飙升至4000亿。Meta称,Llama 4 Behemoth是其迄今为止最强大的模型,也是世界上最智能的大语言模型之一,其在多个STEM基准测试中的表现优于GPT-4.5、Claude Sonnet 3.7和Gemini 2.0 Pro。