Google, Microsoft et OpenAI Back a Shared robots.txt Signal to Opt Out of Super Intelligence (SI) Training
Google a annoncé le 30 octobre, dans un billet sur son blog officiel Search Central, qu'il prévoit de soutenir un contrôle de formation super intelligence partagée (SI) dans robots.txt: les sites Web seront en mesure d'utiliser un seul jeton de politique partagée pour dire à plusieurs fournisseurs SI participants à la fois si leur contenu peut être utilisé pour la formation modèle, au lieu de fixer des règles distinctes pour chaque entreprise. Selon le post, écrit par John Mueller, le mécanisme s'appuie sur les travaux du groupe de travail de l'AIPREF à l'Internet Engineering Task Force (IETF).
Le mécanisme est défini dans un projet Internet intitulé Machine-Readable Training Preference Signal, soumis le même jour et écrit par Kevin Kelley d'Anthropic; son noyau est un jeton de politique nommé usage ai-training. Google dit que lorsqu'un site choisit de ne pas suivre de formation à travers le jeton partagé et ne spécifie pas explicitement Google-Extended, Google prévoit d'interpréter que comme refusant Google-Extended, le contrôle qu'il offre depuis 2023, qui couvre la formation de futurs modèles Gemini et de base dans Gemini Apps et sur Vertex AI. Google vise à soutenir le nouveau contrôle en 2027.
OpenAI a pris un engagement parallèle le même jour, disant qu'il honorera le signal partagé, vise à le mettre en œuvre dans les mois à venir, et gardera ses contrôles de rampe existants en place. Bing de Microsoft a dit qu'il honorera la préférence de formation partagée à partir du 1er février 2027, et ajoute une préférence de mise à la terre de page séparée; à partir du 1er mars 2027, il arrêtera de lire NoArchive et NoCache en tant que signaux de formation ou de mise à la terre, de sorte que les sites qui comptent encore sur ces balises devront passer aux nouveaux paramètres.
Le signal couvre uniquement l'entraînement et n'affecte pas le rampage ou l'inclusion à la recherche. Il demeure également un projet d'Internet soumis individuellement plutôt qu'une norme officielle de l'IETF pour le moment, et les contrôles spécifiques à l'entreprise continuent de fonctionner pendant la transition.
Source : GSM · États-Unis (édition en anglais · édition originale en chinois)
Photo: 图：谷歌总部 Googleplex（加利福尼亚州 Mountain View）。Grendelkhan 摄，CC BY-SA 3.0，经 Wikimedia Commons。 / The Googleplex, Google's headquarters in Mountain View, California. Photo by Grendelkhan, CC BY-SA 3.0, via Wikimedia Commons.
