whoisy.online

Генератор Robots.txt

Создание и настройка правил для поисковых роботов (robots.txt).

Сгенерированный файл Robots.txt

User-agent: Googlebot
Disallow: /admin/
Disallow: /api/
Disallow: /private/

User-agent: Bingbot
Disallow: /admin/
Disallow: /api/
Disallow: /private/

Sitemap: https://whoisy.online/sitemap.xml