UC Berkeley (LMSYS)
L’institution académique derrière vLLM et l’arène de modèles
États-Unis Institution académique Open source
Le texte intégral est présenté en anglais ; le titre et le résumé sont localisés.
CE QUE C'EST
UC Berkeley is a public research university whose LMSYS and related teams have long worked on open models and inference systems. It led the development of the high-throughput inference engine vLLM and runs a model arena where models compete pairwise and users vote.
Pourquoi c'est important
Through vLLM’s PagedAttention it raised the inference throughput of open models, and through the model arena it provided public evaluation independent of vendor leaderboards — both widely adopted.
Jalons clés
- 1868
Founded
- 2023
Released the high-throughput inference engine vLLM