Robots.txt Generator & Tester

Maak geldige robots.txt-bestanden met aangepaste crawl-regels. Bepaal welke pagina's zoekmachines kunnen bereiken en crawlen.