LMSYS
美国开源大模型评估机构,Chatbot Arena 创造者
美国-加利福尼亚厂商梯队待完善
📖 这家公司做什么
1. 厂商本体介绍
LMSYS(Large Model Systems Organization)成立于 2023 年,由 UC Berkeley、UCSD、CMU 等高校研究者发起。机构专注大模型评估与开源研究,是全球最具影响力的大模型排行榜 Chatbot Arena 的出品方。
2. 厂商模型特点
LMSYS 不主研旗舰大模型,但出品 Vicuna 系列开源微调模型(基于 Llama)。机构核心价值在于评估:① Chatbot Arena 人类偏好 Elo 排行榜(全球最权威);② MT-Bench 等自动化基准;③ LongBench、AgentBench 等专项评估。
3. 厂商AI发展
LMSYS 是大模型评估领域的绝对权威。2023 年发布 Vicuna 系列跻身开源第一梯队;2023-2024 年 Chatbot Arena 成为全球大模型评测事实标准;2025 年扩展至多模态、视频、Agent 评估。定位为非营利、学术驱动的大模型评估公共基石。
LMSYS(Large Model Systems Organization)成立于 2023 年,由 UC Berkeley、UCSD、CMU 等高校研究者发起。机构专注大模型评估与开源研究,是全球最具影响力的大模型排行榜 Chatbot Arena 的出品方。
2. 厂商模型特点
LMSYS 不主研旗舰大模型,但出品 Vicuna 系列开源微调模型(基于 Llama)。机构核心价值在于评估:① Chatbot Arena 人类偏好 Elo 排行榜(全球最权威);② MT-Bench 等自动化基准;③ LongBench、AgentBench 等专项评估。
3. 厂商AI发展
LMSYS 是大模型评估领域的绝对权威。2023 年发布 Vicuna 系列跻身开源第一梯队;2023-2024 年 Chatbot Arena 成为全球大模型评测事实标准;2025 年扩展至多模态、视频、Agent 评估。定位为非营利、学术驱动的大模型评估公共基石。
✨ 热门旗舰模型
LMSYS 旗下代表模型
📅 总家族序列
按首发时间排列的 4 个模型家族
未知
Fastchat T5
1 款模型
→
未知
Vicuna 7b
1 款模型
→
未知
Vicuna 33b
1 款模型
→
未知
Vicuna 13b
1 款模型
社区真实评价
登录后才能发表评价,与极客们一起交流哦~