跳到正文
AI 图鉴

Llama

把开放权重路线做成主流的通用模型家族

Meta AI (FAIR) 模型 开放权重
输入文本文本

它是什么

Llama 是 Meta 于 2023 年 2 月发布的大语言模型系列,以开放权重的方式发布,可下载后在自有环境中运行。从 Llama 2 起,Meta 允许商业使用,并给出 7B、13B、70B 等多个规模;Llama 3.1 又把最大版本扩展到 405B 参数。它本身是一个预训练基座,社区在其上做了大量指令微调与领域适配。开放权重让它成为许多开源项目的默认起点。

为什么值得记住

用开放权重加可商用许可的方式发布大模型,让“下载一个基座再自己微调”成为普遍做法,也是开放权重阵营与闭源前沿正面竞争的开端。

关键规格

参数规模
8B / 70B / 405B(Llama 3.1 系列)
上下文窗口
128K tokens(Llama 3.1)
开放权重
是
发布
2023-02

所属能力

相关概念

同类产品