Quatre laboratoires d'IA soutiennent un même opt-out robots.txt pour l'entraînement, avec des dates échelonnées jusqu'en 2027

Un éditeur peut exprimer une seule préférence d'entraînement au lieu de tenir une règle distincte pour GPTBot, Google-Extended et ClaudeBot. Le jeton ne crée ni licence ni paiement. Microsoft le dit sans détour.

Une ligne, sans nouvelle grammaire

Le jeton vient d'un Internet-Draft de Kevin Kelley, responsable des standards chez Anthropic. Il l'a soumis au groupe de travail AI Preferences de l'IETF le 30 octobre 2026.

Un site écrit User-Agent: __usage_ai-training, puis Disallow: / et les lignes Allow: qu'il souhaite. L'exemple du draft bloque tout sauf un dossier /press-kit/. Le draft n'ajoute aucun nom de directive ni aucune grammaire nouvelle. Un parseur qui n'a jamais entendu parler du jeton ignore le groupe. Un groupe générique, User-Agent: *, ne peut pas correspondre au jeton. Un fichier sans ce groupe n'exprime aucune préférence.

Quatre entreprises, quatre dates

Microsoft appliquera la préférence partagée à partir du 1er février 2027, à mesure que Bing réexplore les pages. Google vise 2027, et sa documentation sur les robots indique début 2027. OpenAI dit vouloir mettre en œuvre le signal dans les prochains mois.

Anthropic a commencé. Kelley a écrit que la prise en charge dans l'ensemble de ses services prendrait du temps. Il s'attend à des complications et des cas limites inévitables.

Google a décrit une lecture précise. Si un site se retire avec la ligne partagée sans mentionner Google-Extended, Google prévoit de le traiter comme un blocage Google-Extended. Google-Extended est le contrôle d'entraînement que Google propose depuis 2023. John Mueller, son advocate pour la recherche, a écrit que le jeton aidera les sites à exprimer leurs préférences d'entraînement IA auprès de plusieurs fournisseurs en une seule étape.

Une préférence, pas un blocage

Le draft précise que le jeton n'est pas une directive de comportement d'exploration. Il indique que des accords privés peuvent primer sur les préférences exprimées par son intermédiaire. Il couvre les contenus utilisés pour modifier les paramètres appris d'un modèle d'IA générative. Les modèles qui se contentent de classer ou de hiérarchiser n'entrent pas dans son champ.

Microsoft a séparé l'entraînement du grounding, l'étape où une réponse d'IA récupère une page en direct. Son réglage AI Grounding au niveau de la page comprend une option DisallowExtended. Celle-ci limite l'usage aux produits de Microsoft, comme Copilot et Microsoft 365, et exclut les services de grounding qu'il vend à d'autres entreprises. Microsoft prévient que bloquer le grounding réduira fortement la visibilité d'une marque dans les expériences générées par l'IA. Cela ne change pas la place d'une page dans les résultats de recherche Bing.

Pourquoi les éditeurs ne sont pas satisfaits

La Digital News Publishers Association poursuit OpenAI en justice. L'affaire est devant la Haute Cour de Delhi, en Inde. Elle allègue que du journalisme indien protégé par le droit d'auteur a été aspiré pour entraîner ChatGPT, y compris depuis des sites qui avaient utilisé robots.txt pour tenir les robots d'IA à distance.

Une préférence tournée vers l'avenir ne change rien à cela.

Le draft a peu de poids. Le datatracker de l'IETF indique que l'IETF ne l'a pas approuvé et qu'il n'a aucun statut formel dans le processus de normalisation. Il expire le 3 mai 2027. OpenAI l'a qualifié de mécanisme de coordination plutôt que de contrôle de sécurité au sens de la RFC 9309. Un aspirateur qui ignore robots.txt ignorera aussi ce jeton.

Ce qui vient ensuite

Les sites peuvent enregistrer une préférence de grounding temporaire dans Bing Webmaster Tools. L'option entre en service le 15 décembre 2026. Les balises NoArchive et NoCache de Microsoft, utilisées depuis 2023, cessent d'être comptées comme préférence d'entraînement ou de grounding après le 1er mars 2027.

Andy Stone, responsable de la communication de Meta, s'est prononcé en faveur d'un signal commun. Meta n'a pas dit si ses robots le respecteront. Google affirme que l'approche est cohérente avec le Code de bonnes pratiques de l'UE pour l'IA à usage général au titre de l'AI Act. Ce code considère robots.txt comme un moyen principal pour les éditeurs d'exprimer des préférences lisibles par machine.