Technical

Robots.txt-Generator

Erzeuge eine gültige robots.txt mit Allow/Disallow-Regeln, Sitemap und Crawl-Delay.

Sag Suchmaschinen, was sie crawlen sollen. Erstelle eine saubere robots.txt mit Sitemap.

Free · runs in your browser

Paths to block (one per line):

Output

Run this tool

Free daily runs · Pro is unlimited.

How to use Robots.txt-Generator

  1. Alle erlauben oder Pfade sperren wählen
  2. Sitemap-URL eintragen
  3. robots.txt ins Website-Root legen

Frequently asked questions

Wohin gehört robots.txt?

Ins Root der Domain, z. B. https://example.com/robots.txt

Verhindert es Indexierung?

Es steuert das Crawlen, nicht die Indexierung. Für Ausschluss noindex nutzen.

Related tools

XML-Sitemap-Generator

Open tool →

Canonical-Tag-Prüfer

Open tool →

Meta-Description-Generator

Open tool →

SEO-Titel-Generator

Open tool →

Open-Graph-Generator

Open tool →

Link-Extraktor

Open tool →