La startup d'IA Galileo Technologies classe Claude 3.5 Sonnet, Gemini de Google et Qwen2-72B-Instruct d'Alibaba en tête du benchmark Hallucination Index. AI startup Galileo Technologies ranks Claude 3.5 Sonnet, Google's Gemini, and Alibaba's Qwen2-72B-Instruct top in the Hallucination Index benchmark.

La startup d'intelligence artificielle Galileo Technologies a classé très haut les modèles de langage de milieu de gamme et open source de grande taille dans un nouveau test de référence, l'Hallucination Index. AI startup Galileo Technologies has ranked midrange and open-source large language models highly in a new benchmark test, the Hallucination Index. L'indice de référence, qui évalue 22 principaux modèles d'IA générative, a mesuré leur précision sur trois collections de tâches. The benchmark, which evaluates 22 leading generative AI models, measured their accuracy across three task collections. Le Claude 3.5 Sonnet d'Anthropic est arrivé en tête du classement, tandis que le Gemini 1.5 Flash de Google a obtenu les meilleurs résultats en termes de coût. Anthropic's Claude 3.5 Sonnet topped the ranking, while Google's Gemini 1.5 Flash performed best on cost. Le Qwen2-72B-Instruct d'Alibaba était le modèle open source le plus performant. Alibaba's Qwen2-72B-Instruct was the top-performing open-source model.