KI-lesbare Service-Zusammenfassung
Robots.txt-Tester
Prüfen Sie robots.txt-Allow- und Disallow-Regeln für Beispielpfade vor der Veröffentlichung.
- Kategorie
- SEO
- Datenschutz
- Kein Crawler und kein Remote-Abruf; ausgewertet wird nur der eingefügte Text.
- Grenzen
- Praktische Vorschau für gängige Regeln, kein vollständiger Crawler-Compliance-Test.
Geeignet für
- Crawl-Regeln vor der Bereitstellung prüfen
- Unbeabsichtigte Sperren finden
- Konflikte zwischen allow und disallow erklären
Eingaben
- robots.txt-Regeln
- User-Agent
- Beispielpfade
Ausgaben
- Vorschau erlaubter und gesperrter Pfade
- Passende Regel
- Kopierbare Zusammenfassung