Claude 3 Opus surpasse GPT-4 dans les évaluations des utilisateurs

Le modèle Claude 3 Opus AI d’Anthropic bat GPT-4 pour la première fois dans Chatbot Arena.

Le roi est mort

DÉCHIRER GPT-4
Claude opus #1 ELo

Haiku bat GPT-4 0613 et Mistral grand
C’est fou vu à quel point c’est bon marché et rapide https://t.co/XWmvTE6h75 pic.twitter.com/fAwzJScLTH

– Nick Dobos (@NickADobos) 26 mars 2024

« Le roi est mort. RIP GPT-4 », a écrit le développeur de logiciels Nick Dobos.

Chatbot Arena est utilisé par les chercheurs en réseaux neuronaux pour évaluer les capacités des chatbots. GPT-4 a été ajouté à la plateforme en mai 2023, ses variantes ont occupé la première place jusqu’au 26 mars 2024, jusqu’à ce qu’elles cèdent la place à Claude 3. Selon les données d’arène, l’un des petits modèles d’Anthropic, Haiku, montre également de bons résultats .

« Pour la première fois, les meilleurs modèles disponibles ne sont pas présentés par OpenAI. Opus est le modèle le plus approprié pour les tâches complexes, et Haiku équilibre rentabilité et efficacité », a déclaré Simon Willison, chercheur en IA.

Chatbot Arena est géré par la Large Model Systems Organization, qui se consacre à la recherche sur les modèles open source. Elle collabore avec des étudiants et des professeurs de l’Université de Californie à Berkeley, de l’Université de Californie à San Diego et de l’Université Carnegie Mellon.

La particularité de la plateforme est l’absence de critères d’évaluation objectifs. Lors de la visite du site, l’utilisateur voit un champ de saisie de données et deux fenêtres avec les résultats du travail de modèles d’IA non identifiés. Le principal défi consiste à décider quel résultat semble le meilleur en fonction de vos préférences personnelles.

Grâce à cette approche, Chatbot Arena identifie les leaders et met régulièrement à jour le tableau pour refléter les résultats.

Amazon avait précédemment augmenté son investissement dans Anthropic à 4 milliards de dollars.

Rappelons qu’en mars, la startup d’IA a présenté le chatbot Claude 3, qui s’est avéré être le plus rapide et le plus puissant parmi tous les concurrents selon les tests de l’entreprise.

Vous avez trouvé une erreur dans le texte ? Sélectionnez-le et appuyez sur CTRL+ENTRÉE