综合介绍
LMSYS Org，全称Large Model Systems Organization，是由加利福尼亚大学伯克利分校的学生和教师与加州大学圣地亚哥分校以及卡内基梅隆大学合作共同创立的开放式研究组织。该组织的目标是通过共同开发开放模型、数据集、系统和评估工具，使大型模型对所有人都可访问。
功能列表
- Vicuna：一个聊天机器人，具有90%的ChatGPT质量，可在7B/13B/33B大小中选择。
- Chatbot Arena：通过众包和Elo评级系统对LLMs进行可扩展和游戏化的评估。
- SGLang：用于复杂LLM程序的高效接口和运行时。
- LMSYS-Chat-1M：大规模的实际LLM对话数据集。
- FastChat：用于训练、服务和评估基于LLM的聊天机器人的开放平台。
- MT-Bench：用于评估聊天机器人的一套具有挑战性的、多轮的、开放式的问题。
使用帮助
- 访问LMSYS Org网站，查看并了解各种功能和项目。
- 在Chatbot Arena中，可以向两个匿名模型（例如，ChatGPT, Claude, Llama）提问，并为更好的一个投票。
