Генератор та тестер Robots.txt

Створюйте коректні файли robots.txt з власними правилами сканування. Контролюйте, які сторінки можуть доступувати та сканувати пошукові системи.