В последние несколько дней владельцы сайтов стали получать через Google Search Console уведомления о необходимости удалить из robots.txt директиву noindex.
Выглядит это так:
В сообщении говорится:
«… поисковик обнаружил, что файл robots.txt содержит неподдерживаемую директиву noindex. Google никогда официально не признавал ее, а потому с первого сентября 2019 года она перестанет работать».
Итак, предупреждение получено. Самое время почистить файл robots.txt.
