Robots.txt Generator
Generiere eine robots.txt mit erlaubten und gesperrten Pfaden sowie Crawler-Verzögerung.
-
Information
Dieses Tool läuft komplett im Browser. Deine Daten werden nicht an den Server gesendet. Weitere nützliche Tools findest du im Tool-Portal.
