OpenAI News·· 2024-08-13sélectionAI Score62
OpenAI présente SWE-bench Verified
Introducing SWE-bench Verified
AI Introduction
OpenAI publie SWE-bench Verified, un sous-ensemble de SWE-bench validé par des humains, destiné à évaluer plus fiablement la capacité des modèles d'IA à résoudre des problèmes logiciels réels.
Raison de la recommandation
OpenAI publie un sous-ensemble validé par des humains de SWE-bench, ce qui permet de situer la fiabilité de l'évaluation des capacités de codage des modèles.
Source :OpenAI News · openai.com