Vier AI-bedrijven gaan één signaal tegen training op websites respecteren
OpenAI, Google, Microsoft en Anthropic zeggen dat ze een gedeeld signaal gaan respecteren waarmee een website AI-training in één keer bij hen allemaal weigert. Anthropic doet al mee, Google en Microsoft volgen in 2027 en OpenAI in de komende maanden.
Waarom het ertoe doet: Wie een website of blog beheert, hoeft straks niet meer bij elk AI-bedrijf apart te regelen of zijn teksten voor training mogen dienen.
Robots.txt is een tekstbestand op een website dat programma's die webpagina's afstruinen vertelt wat ze mogen lezen. Tot nu toe moest een site zijn wens over AI-training aan elk AI-bedrijf apart laten weten.
Wat is het policy token in robots.txt?
Het nieuwe signaal heet een "policy token". Een website zet die vaste aanduiding in zijn robots.txt. Ziet een AI-bedrijf het, dan houdt het zijn programma's bij de site weg.
Kevin Kelley van Anthropic stelde het voor. Hij is technisch leider voor standaarden bij het bedrijf. Het voorstel loopt via de Internet Engineering Task Force (IETF), een organisatie die afspraken over internetstandaarden maakt.
Alle vier de bedrijven zeggen dat ze hun programma's bij dit signaal weren, meldt The Verge. Het signaal geldt voor AI-training en ook voor programma's die webpagina's voor andere doelen lezen. Zo'n weigering hoeft dus niet meer per bedrijf te worden ingesteld.
Wat doen Microsoft, Google en Meta met het signaal?
Microsoft wil sites fijnere keuzes geven, schrijft The Verge. Een site kan training weigeren, of weigeren dat een AI-model zijn pagina's als gecontroleerde bron gebruikt. Dat laatste heet AI grounding en moet verzinsels van de AI verminderen.
Volgens Microsoft blijft een site in de zoekresultaten van Bing staan, wat hij ook kiest. Google had al vergelijkbare regels. Daar bepaalt een site zelf of zijn inhoud in AI-zoekfuncties of in training terechtkomt.
Ook Meta reageerde. Woordvoerder Andy Stone zegt: "Een gemeenschappelijk signaal dat zulke voorkeuren in één keer aan meerdere aanbieders doorgeeft, is een belangrijke stap." Of Meta het signaal ook gaat volgen, zegt hij niet.
Wanneer kun je AI-training op je site weigeren?
Anthropic volgt het signaal al. Google en Microsoft doen dat vanaf 2027. OpenAI zegt dat het in de "komende maanden" volgt.
Beheer je een website of blog, dan werkt het signaal dus nog maar bij één van de vier. Wacht je tot ook de andere drie meedoen, dan regel je je wens met één aanduiding in plaats van vier aparte instellingen. Kijk daarvoor bij de uitleg van je websitebouwer of hostingbedrijf.
Het signaal dwingt niets af en werkt alleen bij bedrijven die meedoen. Uitgevers zoeken ook andere wegen. Cloudflare, een bedrijf voor internetbeveiliging, blokkeert AI-programma's al standaard.
Gemeld door 3 bronnen: OpenAI, The Verge AI, The Verge (via Techmeme)
Lees de bron (naar de bron)Klopt er iets niet?
Onderwerpen: Robots.txt
Elke ochtend het AI-nieuws in je mail
Om 07:00 de belangrijkste berichten, in gewone taal. Gratis, en afmelden kan altijd met één klik. Je meldt je aan bij Buttondown, de dienst die de nieuwsbrief voor ons verstuurt.