Teknik
robots.txt üreticisi
allow/disallow, sitemap ve crawl-delay içeren geçerli robots.txt üretin.
Arama motorlarına neyi tarayacağını söyleyin. Sitemap içeren temiz robots.txt oluşturun.
Ücretsiz · tarayıcıda
Paths to block (one per line):
Çıktı
Run this tool
Free daily runs · Pro is unlimited.
Nasıl kullanılır robots.txt üreticisi
- Tümüne izin ver veya yolları engelle
- Sitemap URL'sini ekle
- robots.txt'yi kök dizine kopyala
Sık sorulan sorular
robots.txt nereye?
Alan adının köküne, örn. https://example.com/robots.txt
İndekslemeyi engeller mi?
Taramayı yönetir, indekslemeyi değil. Dışlamak için noindex kullanın.