Aller au contenu
Hugging Face Blog·· 2022-10-19sélectionAI Score60

MTEB : un benchmark massif pour les modèles d'embedding de texte

MTEB: Massive Text Embedding Benchmark

AI Introduction

Hugging Face présente MTEB, un benchmark massif destiné à mesurer les performances des modèles d'embedding de texte sur des tâches variées. Il regroupe 56 jeux de données répartis en 8 tâches, jusqu'à 112 langues, et un classement public de plus de 2000 résultats. La bibliothèque MTEB permet d'évaluer n'importe quel modèle produisant des embeddings et de soumettre ses résultats au classement.

Raison de la recommandation

Le MTEB couvre 56 jeux de données et 8 tâches, avec un classement public et une bibliothèque réutilisable pour évaluer les modèles d'embedding.

Source :Hugging Face Blog · huggingface.co