Technisch
robots.txt generator
Genereer een geldige robots.txt met allow/disallow, sitemap en crawl-delay.
Vertel zoekmachines wat ze mogen crawlen. Maak een schone robots.txt met sitemap.
Gratis · in je browser
Paths to block (one per line):
Uitvoer
Run this tool
Free daily runs · Pro is unlimited.
Hoe te gebruiken robots.txt generator
- Alles toestaan of paden blokkeren
- Voeg de sitemap-URL toe
- Kopieer robots.txt naar de root
Veelgestelde vragen
Waar hoort robots.txt?
In de root van het domein, bijv. https://example.com/robots.txt
Voorkomt het indexering?
Het stuurt crawlen, niet indexeren. Gebruik noindex om uit te sluiten.