Beleid & regelgeving
Google steunt in 2027 één gedeelde robots.txt-regel om AI-training door je website te weigeren
Google wil in 2027 één gedeelde regel in robots.txt ondersteunen waarmee je site bij meerdere AI-aanbieders tegelijk aangeeft dat training niet mag.
Op basis van Google Search Central en Search Engine Roundtable
Samengesteld met AI-assistentie uit de onderstaande bronnen, onder redactie van Frederiek Pascal. Hoe dit werkt
In het kort
- Google kondigde op 30 oktober 2026 aan dat het een gedeelde AI-trainingsregel in robots.txt wil ondersteunen, naar verwachting vanaf begin 2027.
- Met één regel geef je aan dat AI-aanbieders je website niet mogen gebruiken om hun modellen te trainen, in plaats van elke aanbieder apart aan te schrijven.
- Google zegt dat de gedeelde regel wordt behandeld alsof je Google-Extended hebt geblokkeerd, tenzij je voor Google-Extended zelf iets anders instelt.
- Voor Vlaamse webshops en bedrijfssites is dit een eenvoudiger manier om je voorkeur vast te leggen, al is er nu geen directe actie nodig.
- De standaard bij de IETF is nog niet definitief, en een deelnemer wijst op onopgeloste punten in het huidige ontwerp.
Google heeft op 30 oktober 2026 aangekondigd dat het een gedeelde regel wil ondersteunen waarmee websites in één keer aangeven of AI-bedrijven hun inhoud mogen gebruiken om modellen te trainen. Die regel komt in robots.txt, het kleine tekstbestand op je website dat zoekrobots vertelt wat ze wel en niet mogen bekijken. Google mikt op steun in 2027. Volgens Search Engine Roundtable doen Bing, OpenAI en Anthropic hetzelfde vrijwillig.
Wat verandert er concreet?
Nu moet je per AI-aanbieder een aparte instructie opnemen als je training wilt weigeren. Straks kun je met één gedeelde aanduiding, een zogeheten policy token, je brede voorkeur doorgeven aan alle deelnemende aanbieders. Je kunt ook kiezen om per aanbieder iets anders in te stellen.
Het voorstel komt van de werkgroep AIPREF van de IETF, de organisatie die afspraken over internetstandaarden opstelt. Google zegt dat het voorstel de feedback weerspiegelt van uitgevers, maatschappelijke organisaties en toezichthouders die om afspraken voor de hele sector vroegen.
Hoe verhoudt dit zich tot Google-Extended?
Google-Extended is de instelling die Google sinds 2023 aanbiedt om AI-training te weigeren. Die blijft gewoon werken. Volgens Google wordt de nieuwe gedeelde regel behandeld alsof je Google-Extended hebt geblokkeerd, maar alleen als je Google-Extended niet zelf expliciet hebt ingesteld. Een specifieke instelling voor Google wint dus van de brede regel.
Google voegt eraan toe dat sites die Google-Extended uitdrukkelijk toestaan, in aanmerking komen om te verschijnen in antwoorden van de Gemini-apps en daar klikken te ontvangen. Dat is een bewering van Google zelf. Onafhankelijke cijfers over hoeveel verkeer dat oplevert, staan niet in de bronnen.
Search Engine Roundtable meldt bovendien dat Google een aparte instelling in Search Console heeft voor generatieve AI in Search. Die staat los van deze nieuwe regel. Google noteerde op zijn pagina met crawlers dat het de gedeelde regel begin 2027 wil ondersteunen, met de naam “__usage_ai-training”.
Is de standaard al af?
Nee. Google noemt het zelf een voorstel in ontwerpvorm, en de rest van de voorwaarden van AIPREF wordt nog besproken. Nate Hake, die volgens eigen zeggen een jaar aan de werkgroep meewerkte, schreef op X dat er nog grote punten van discussie zijn. Hij is vooral ontevreden over een onderdeel van het ontwerp dat voorkeuren niet laat gelden voor wat een gebruiker zelf doet, wat volgens hem kunstenaars en makers treft die last hebben van AI-kopieën. Hij vindt het proces overigens vooral productief.
Google stelt dat het voorstel past bij de Europese gedragscode voor AI-modellen voor algemeen gebruik onder de AI-verordening. Die code erkent robots.txt als belangrijkste manier om machineleesbare voorkeuren door te geven. Dat is een uitspraak van Google, geen oordeel van een toezichthouder.
Wat staat er niet in de bronnen?
De bronnen zeggen niet of elke AI-aanbieder zich ook echt aan de regel houdt, hoe dat gecontroleerd wordt, of de regel ook geldt voor trainingsdata die al verzameld is. Ze zeggen evenmin wat er gebeurt met AI-zoekresultaten, die aparte instellingen volgen. Ook is niet duidelijk welke aanbieders buiten de genoemde bedrijven zullen volgen.
Wat betekent dit voor jou
Wat dit verandert voor je AI-voorkeuren online
- Webshop- of bedrijfssite-eigenaar Je hoeft niet te haasten. Pas als de regel eind 2026 of in 2027 echt werkt, wordt één instelling genoeg in plaats van een lijstje per aanbieder. Tot dan blijven de bestaande instellingen je enige houvast.
- Marketeer die vindbaarheid in AI-antwoorden wil Weigeren van training en zichtbaar zijn in AI-antwoorden vallen niet altijd samen. Google koppelt zichtbaarheid in Gemini aan het toestaan van Google-Extended, dus wie breed blokkeert, moet bewust beslissen of dat die zichtbaarheid kost.
- Wie gevoelige of betaalde content publiceert Een voorkeur in robots.txt is een verzoek, geen technische afsluiting. De bronnen zeggen niets over controle op naleving, dus leg voor waardevolle content ook je voorwaarden en toegang apart vast.
Veelgestelde vragen
Wat is robots.txt en waarom doet het ertoe voor AI?
Robots.txt is een tekstbestand op je website dat bots vertelt welke pagina's ze mogen bezoeken. Google wil er een gedeelde regel aan toevoegen waarmee je aangeeft dat je inhoud niet voor AI-training gebruikt mag worden. Zo hoef je niet bij elk AI-bedrijf afzonderlijk een instructie te plaatsen.
Wanneer gaat Google de gedeelde AI-regel ondersteunen?
Google mikt op begin 2027, zo staat het op zijn pagina met crawlers. Het bedrijf zegt samen met andere aanbieders te streven naar steun in 2027 en belooft updates over de voortgang. Een exacte datum geven de bronnen niet.
Moet ik nu al iets aanpassen aan mijn website?
Dat hoeft niet. Google-Extended werkt nog en blijft gelden naast de nieuwe regel. Wil je AI-training nu al weigeren, dan kan dat met de bestaande instellingen. Pas als de standaard definitief is en aanbieders hem invoeren, wordt de gedeelde regel de eenvoudigste route.
Wat gebeurt er als ik de nieuwe regel én Google-Extended gebruik?
Dan telt je specifieke instelling voor Google. Volgens Google wordt de gedeelde regel alleen als blokkade van Google-Extended gelezen wanneer je die laatste niet zelf hebt ingesteld. Zo kun je breed weigeren en toch voor één aanbieder een uitzondering maken.
Is het al een officiële internetstandaard?
Nee, het is een ontwerpvoorstel van de AIPREF-werkgroep van de IETF. Een deelnemer meldt dat er nog grote geschilpunten zijn. Google spreekt van een toekomstige standaard die moet ontstaan als genoeg aanbieders het voorstel steunen.
Kan ik met deze regel ook AI-zoekresultaten weigeren?
De bronnen koppelen de nieuwe regel aan AI-training, niet aan AI-zoekantwoorden. Search Engine Roundtable noemt voor generatieve AI in Google Search een aparte instelling in Search Console. Over andere zoekdiensten zeggen de bronnen hier niets.
Bronnen
Volg Kunstbrein in Google
Zet Kunstbrein bij je voorkeursbronnen. Dan zie je het vaker bij het nieuws bovenaan je zoekresultaten en in de AI-antwoorden van Google.
Voeg toe als voorkeursbron (opent Google in een nieuw tabblad)