Actualités IA · Préférences d'entraînement de l'IA
Robots.txt : quatre acteurs de l'IA, un refus d'entraînement
Anthropic respecte déjà un refus d'entraînement commun dans le fichier robots.txt ; Google et Microsoft s'y mettent en 2027, et Bing ajoute un réglage distinct pour les réponses IA.
Aujourd'hui, un site qui veut garder ses pages hors de l'entraînement des IA doit nommer le robot de chaque entreprise dans son fichier robots.txt, le fichier texte qui indique aux robots ce qu'ils ont le droit de lire. Le 30 octobre 2026, OpenAI, Google, Microsoft et Anthropic ont annoncé qu'ils respecteront à la place un signal d'entraînement unique, rapporte The Verge. Ce « policy token » vient d'un projet encore en discussion à l'Internet Engineering Task Force, l'organisme qui rédige les standards du web, et a été proposé par Kevin Kelley, responsable des standards chez Anthropic. Anthropic le respecte déjà, Google et Microsoft ont fixé leur échéance à 2027, et OpenAI n'a cité aucun mois.
Régulateurs, éditeurs et organisations de la société civile réclamaient un moyen plus simple de refuser l'entraînement, a indiqué Google à Search Engine Roundtable.
Microsoft va plus loin. En plus du signal d'entraînement, l'article de Bing ajoute un réglage de « grounding » au niveau de la page, le grounding désignant l'usage d'une page pour rédiger une réponse IA, avec des liens vers elle. Les éditeurs peuvent refuser l'entraînement tout en restant cités dans Copilot, ou limiter le grounding aux seuls produits de Microsoft. Bing lit les nouveaux réglages à partir du 1 février 2027 et cessera de traiter ses anciennes balises NoArchive et NoCache comme des préférences IA après le 1 mars. Microsoft ne cache pas le prix à payer : une marque qui bloque le grounding apparaît moins dans ces réponses IA.
Le token couvre ce que les robots collectent sur votre site. Ce qu'une équipe saisit dans un assistant relève plutôt de l'offre : notre vérification du 31 octobre relève pour la place Team de Claude 25 $ par mois, ou 20 $ facturés à l'année, sans entraînement des modèles sur vos contenus par défaut.
Une fois les quatre acteurs alignés sur le token, dès 2027 pour Google et Microsoft, une seule ligne robots.txt suffira donc à garder les pages d'un site hors de leur entraînement, tandis que sur Bing, une marque peut laisser le grounding ouvert pour que les réponses IA continuent de citer ces pages.
Sources
- Microsoft Bing : Your content, your choice: clearer preferences for training and grounding. Vérifié le
- Search Engine Roundtable : Google Adopts New AI Training Control. Vérifié le
- The Verge : The biggest names in AI are backing a new way to opt out of scraping. Vérifié le
Plus d’actu IA du
- Le régulateur britannique enquête sur les conditions IA de Meta, que Meta suspend
- Reddit ouvre ses campagnes IA Max à tous, mais son action chute de 29 %
- Alphabet perd 500 milliards de dollars en une séance, plombé par ses dépenses d'IA
- DoorDash ne compte que quelques centaines de commandes venues d'agents d'achat IA
- L'offre Claude à 200 $ devient Ultra, sans plafond de 5 heures une fois le compte vérifié
- Microsoft autorise jusqu'à 40 consignes de marque pour les textes publicitaires de son IA
- Spotify envisage un outil de remix par IA de 4 à 5 $ par mois en 2027
- Les publicités ChatGPT s'élargissent sur ordinateur et accueillent les annonces multi-images
- Pinterest atteint 661 millions d'utilisateurs et met en avant sa recherche par IA