UC Berkeley (LMSYS)
Академическая организация, создавшая vLLM и арену моделей
Соединенные Штаты Академический институт Открытый исходный код
Полный текст статьи представлен на английском; заголовок и аннотация локализованы.
ЧТО ЭТО
UC Berkeley is a public research university whose LMSYS and related teams have long worked on open models and inference systems. It led the development of the high-throughput inference engine vLLM and runs a model arena where models compete pairwise and users vote.
Почему это важно
Through vLLM’s PagedAttention it raised the inference throughput of open models, and through the model arena it provided public evaluation independent of vendor leaderboards — both widely adopted.
Ключевые вехи
- 1868
Founded
- 2023
Released the high-throughput inference engine vLLM