Een robots.txt opstellen en testen
Eén klik blokkeert de AI-crawlers (GPTBot, ClaudeBot, Google-Extended, CCBot en de rest). Die staan los van de zoekmachine-crawlers, want de verkeerde blokkeren haalt je uit Google.
- Draait volledig in je browser
- Werkt offline
- Geen upload
- Geen registratie
- Geen watermerk
De tool wordt geladen…
Hoe het werkt
- Noem de delen van de site die je wilt blokkeren (paden), en eventuele uitzonderingen die je wilt toestaan.
- Blokkeer eventueel de AI-crawlers.
- Test een URL tegen het resultaat. De tester gebruikt dezelfde “langste regel wint”-logica die zoekmachines toepassen.
Waarom er niets wordt geüpload
Alles wat deze pagina doet, doet code die in je browsertabblad draait, met dezelfde engine die ook webpagina’s tekent. Je bestand wordt van schijf naar het geheugen van dat tabblad gelezen, daar bewerkt en weer weggeschreven als download. Het wordt nergens naartoe gestuurd — niet naar ons, en niet naar een derde partij.
Controleer het zelf
- Open de ontwikkelaarstools van je browser (F12) en kies het tabblad Netwerk.
- Laad je bestand en start de tool.
- De enige verzoeken die je ziet, halen de code van de tool zelf op — en bij een paar zware tools hun opensource-engine van een openbare CDN — plus één kleine bezoekmelding aan loreatec.jp (adres en titel van de pagina, meer niet). In geen van die verzoeken zit jouw bestand.
Veelgestelde vragen
Schaadt het blokkeren van Google-Extended mijn positie in zoekresultaten?
Nee. Google-Extended bepaalt alleen of je pagina’s worden gebruikt om de AI-modellen van Google (Gemini) te trainen; het heeft geen effect op Google Zoeken. Googlebot is degene die telt voor zoeken, en die blokkeren haalt je volledig uit de resultaten.
Houdt robots.txt een pagina uit Google?
Nee — dit is een veelvoorkomend en kostbaar misverstand. Een Disallow-regel voorkomt dat Google de pagina leest, niet dat hij hem vermeldt: een geblokkeerde pagina kan nog steeds in de resultaten verschijnen, zonder omschrijving, als andere sites ernaar linken. Wil je een pagina uit Google houden, laat hem dan crawlen en voeg in plaats daarvan een noindex-metatag toe.
Verlaat er iets mijn browser?
Nee. Er wordt niets naar een server gestuurd. De hele tool is een klein programma dat in je browsertabblad draait. Eenmaal geladen blijft de pagina werken, ook met de internetverbinding uit.