Из центра Поиска Google пропало руководство по работе с файлом robots.txt, но ознакомиться с данными по-прежнему можно в русской версии портала. Учитывая, что русскоязычное отделение Google по работе с документацией обычно запаздывает на несколько дней, можно предположить, что эту страницу скоро тоже удалят.
Вероятнее всего, компания готовит обновленное руководство с дополнительными данными, учитывающими обновления алгоритмов. Но часть оптимизаторов уже предполагает, что из аудиторских листов можно смело вычеркивать файл robots.txt. Что вы думаете по поводу решения Google, руководство просто устарело или фактор утратил свою ценность? Пишите в комментариях!