LMSYS.org, 즉 대형 모델 시스템 조직(Large Model Systems Organization)은 UC 버클리의 스카이랩(Sky Lab)에서 학생과 교수들이 협력하여 대형 모델 및 시스템을 개발하는 이니셔티브입니다. 이 조직은 개방적이고 접근 가능하며 확장 가능한 모델 개발을 통해 인공지능(AI) 분야를 발전시키는 것을 목표로 하고 있습니다. LLMs(대형 언어 모델)와 VLMs(비전-언어 모델)의 평가 및 개선을 위한 도구와 플랫폼을 제공함으로써 AI 연구와 개발의 혁신을 촉진하고자 합니다. LMSYS.org의 주요 프로젝트 중 하나인 챗봇 아레나(Chatbot Arena)는 사용자가 다양한 LLM을 평가하는 커뮤니티 주도형 평가에 참여할 수 있도록 하여 실제 시나리오에서 모델 성능에 대한 이해를 높이는 데 기여하고 있습니다. 이 조직은 연구자, 개발자 및 AI 애호가를 위한 다양한 기능과 프로젝트를 제공하여 AI 분야에서 중요한 역할을 하고 있습니다.