robots.txt- und Sitemap-Prüfer
Nur-Lese-Abruf von robots.txt und Sitemap über einen genannten CORS-Proxy.
Dieses Tool läuft im Browser. Namen und Schritte sind lokalisiert; die interaktive Oberfläche ist in allen Sprachen gleich.
How to Use
- Fügen Sie den Site-Ursprung ein (https).
- Bestätigen Sie den CORS-Proxy-Hinweis.
- Prüfen Sie Allow/Disallow und Sitemap-URL-Zahlen. Kein Googlebot und keine Search Console.
Key Features
- Nur Lesen
- Allow/Disallow-Regeln
- Sitemap-URL-Zahlen
- Kein Crawl