Hugging Face Blog·· 2023-10-03sélectionAI Score62
Hugging Face ajoute l'attribut chat_template aux tokenizers
Chat Templates: An End to the Silent Performance Killer
AI Introduction
Hugging Face annonce que ses tokenizers disposent désormais d'un attribut chat_template。
Raison de la recommandation
L'article explique comment les chat templates stockent le format d'entraînement dans le tokenizer et évitent une dégradation silencieuse des performances.
Source :Hugging Face Blog · huggingface.co