Google Search Central Blog kondigde op 30 oktober 2026 aan dat Google een gedeelde regel in het robots.txt-bestand ondersteunt. Hiermee geef je als website-eigenaar in één keer bij meerdere AI-aanbieders aan of je content gebruikt mag worden voor het trainen van AI-modellen.
Tot nu toe moest je voor elke AI-ontwikkelaar een aparte blokkade instellen. Het initiatief komt voort uit de AIPREF-werkgroep van de IETF. Als je de gedeelde regel gebruikt om AI-training te weigeren, ziet Google dit als een weigering van Google-Extended, behalve als je Google-Extended zelf specifiek anders instelt. De eigen instelling van Google bestaat sinds 2023 en blijft werken naast het nieuwe signaal. Websites die Google-Extended toestaan, blijven in aanmerking komen voor bronvermeldingen in Gemini Apps.
Praktische gevolgen voor ondernemers
Het beheren van technische instellingen voor AI-crawlers wordt eenvoudiger. Je hoeft niet meer voor elke afzonderlijke AI-bot nieuwe regels toe te voegen. Met één regel geef je voorkeuren door aan deelnemende partijen.
Heb je bijvoorbeeld een installatiebedrijf in Den Haag en wil je voorkomen dat AI-modellen jouw teksten gebruiken voor hun training? Met de nieuwe afspraak stel je dat straks centraal in, zonder dat je losse regels voor elke AI-ontwikkelaar hoeft bij te houden.
De instelling kent beperkingen. Het betreft een voorstel voor een open standaard die in stappen wordt uitgerold. Niet alle AI-bedrijven verwerken de regel direct. De regel maakt ook alleen verschil voor het trainen van modellen, niet voor het wel of niet tonen van bronlinks in antwoorden.
Welke stappen je kunt nemen
Je hoeft je bestaande robots.txt niet per direct te wijzigen, omdat de ondersteuning gefaseerd wordt ingevoerd.
- Controleer welke AI-bots momenteel toegang hebben via je huidige robots.txt.
- Bepaal of je content wilt afschermen voor training of kiest voor zichtbaarheid via diensten.
- Volg de updates over de definitieve ondersteuning bij verschillende AI-providers.
Welke keuzes maak jij voor de vindbaarheid en bescherming van je content?
Bron: Google Search Central
