Arena Hard Auto est un pipeline automatique innovant qui convertit les données en direct en benchmarks de haute qualité pour l'évaluation des chatbots. Cette fonctionnalité permet une amélioration continue du processus d'évaluation, s'adaptant à de nouvelles données et interactions utilisateur pour maintenir les benchmarks pertinents et précis.
RouteLLM est un cadre open-source conçu pour servir et évaluer les routeurs de LLM. Il optimise le routage des demandes vers différents modèles en fonction de leurs capacités, garantissant que les utilisateurs reçoivent les meilleures réponses possibles des modèles les plus adaptés.