Проверка доступности для бота PR-CY

Как разрешить боту PR-CY индексировать сайт?

Чтобы разрешить боту PR-CY сканировать ваш сайт, выполните следующие действия:

1. Cloudflare:

   • Войдите в Cloudflare, выберите свой домен.
   • Перейдите в "Firewall", затем в "Firewall Rules".
   • Создайте правило с именем "Разрешить PR-CY.RU".
   • Укажите условие: IP-адрес в диапазоне 87.228.72.128/25 или User Agent содержит "PR-CY".
   • Выберите действие "Allow" и сохраните правило.

2. robots.txt:

   • Проверьте, чтобы файл robots.txt не блокировал бота PR-CY.

   • Если нужно, добавьте строки:

     User-agent: PR-CY-BOT
     Allow: /
     

3. На сервере:

   • Если есть серверные правила (например, .htaccess для Apache), убедитесь, что они не блокируют IP-адреса 87.228.72.128/25 или User Agent "PR-CY".

После этих шагов бот PR-CY сможет сканировать ваш сайт.