Google, Microsoft, Anthropic et OpenAI veulent modifier robots.txt pour refuser l'entraînement des IA
Google, Microsoft, Anthropic et OpenAI ont annoncé le 30 octobre qu'ils respecteraient une même ligne dans robots.txt pour accepter ou refuser l'utilisation d'un site à des fins d'entraînement de l'IA générative. Le texte, intitulé « Machine-Readable Training Preference Signal » et rédigé par Kevin Kelley, ingénieur chez Anthropic, ajoute le jeton __usage_ai-training dans la ligne User-Agent, avec Disallow pour un refus et Allow pour un accord, chemin par chemin. La proposition vise une normalisation par l'IETF et expire le 3 mai 2027 sans nouvelle version. Le signal ne bloque pas l'exploration, ne lie que les fournisseurs volontaires, ne concerne que les contenus récupérés après son ajout et ne prévoit ni contrôle ni sanction ; Apple, Amazon et Meta ne s'y sont pas engagés.