Насколько мне известно SAPE принимает 1000 страниц с сайта. Как система определяет какие страницы оставить, а какие нет если у моего сайта 15 000 страниц?
сапа не делает предпочтений. она последовательно грузит страницы с каждого уровня, где то в сапе расписано сколько страниц с какого уровня грузит. Ну и да, оставляет только те, что в индексе и отсеивает дубли.
"У робота-индексатора есть ограничение по количеству внутренних ссылок, по которым он переходит вглубь сайта. Для главной - 500, для 2-го уровня - 150."
"У робота-индексатора есть ограничение по количеству внутренних ссылок, по которым он переходит вглубь сайта. Для главной - 500, для 2-го уровня - 150."