Rapidata SVG · Human Preference
Rapidata · Des humains comparent les graphiques vectoriels générés par les modèles et évaluent directement la préférence visuelle.
Ce qu'il mesure, comment il le mesure
Seul le Preference Elo de la même tâche SVG statique est retenu ; Alignment, Coherence et Overall ne sont pas comptés une seconde fois. On se base sur le tableau de scores public d'une version figée du jeu de données officiel, qui permet de retracer les affrontements humains d'origine.
Comment utiliser ces preuves
En observation : les données et licences officielles sont disponibles, mais trois alias roulants de DeepSeek manquent de preuve de version figée ; l'ensemble du classement n'est pas adopté pour l'instant. En attente des versions d'exécution de la part de l'évaluateur ; le budget des sources actives n'a pas été réduit.
Limites de l'évaluation et attribution des données
SVG La génération de graphiques ne représente pas tout le design d'interface. Les données brutes publiques ne contiennent ni version du modèle, ni date de génération, ni fingerprint d'API, ce qui empêche de savoir si l'interface roulante a changé de version ; on ne peut pas deviner la version du modèle d'après la date de mise à jour du classement.
Licence des données :CC BY 4.0 · Rapidata/svg-benchmark ;Conserver l'attribution officielle et le lien vers les données.
Résultats publiés par Rapidata ; les scores bruts de chaque épreuve utilisent des échelles différentes et ne peuvent pas être additionnés directement ; le rang de référence applique des règles publiques de normalisation des écarts.