AI21 Labs
研究语言模型与混合架构的以色列实验室
以色列 前沿实验室 闭源
它是什么
AI21 Labs 于 2017 年在特拉维夫成立,早期以文本生成与写作辅助产品切入。它提出把 Transformer 与状态空间模型结合的混合架构 Jamba,试图在长上下文与推理成本之间取得平衡。
它为什么重要
它用 Jamba 这类混合架构,验证了在 Transformer 之外寻找更省算力的长上下文结构是一条可行路线。
关键里程碑
- 2017
在特拉维夫成立
- 2024
发布混合架构模型 Jamba