SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Указать ботам в первую очередь добавлять в поиск страници из sitemap

santeyyy santeyyy  
0
  16.09.2019 22:07       683    

Здравствуйте, такой вот вопрос, сканируют, что гугл, что яндекс, но все страници с sitemap не добавляют. Добавляют разный мусор, больше половины. Знаю что можно тег disallow указать, но на проекте много динамических страниц и все их не знаю. Если ли способ ботам указать что важные страници только в sitemap, а все остальные, если хочет, то пусть добавляет, но только после того как добавит все страници из sitemap.


Ответы на пост (7) Написать ответ
vklimin vklimin
480
17.09.2019 14:56
Так указать не получится. Что Яша, что Гоша лучше всего кладут в индекс страницы, на которые ссылаются (внутренняя перелинковка и внешние ссылки).
0
Решение
fotokrek fotokrek
47
16.09.2019 22:33
В первую очередь нужно выучить правописание, и только потом сайты строить.
3
santeyyy santeyyy
0
16.09.2019 22:40
с телефона набирал, СТРАНИЦЫ. 
0
Ouroboros Ouroboros
1460
17.09.2019 07:51
Тега Disallow не существует в природе. Это директива, прописываемая в файле роботс.тхт.

но на проекте много динамических страниц и все их не знаю
Тем не менее, как правило, их объединяет какое-то общее значение в урле.
В противном случае - никто не говорил, что seo - это легко и быстро. Сканером, ручками.

Если ли способ ботам указать что важные страници только в sitemap
Добавить сайтмап в ПУ вебмастеров Гугла и Яндекса.
Однако, даже все это не отменит тот факт, что поисковики могут также сканировать и проиндексировать прочие страницы сайта по своему усмотрению.
0
santeyyy santeyyy
0
17.09.2019 13:57
добрее нужно быть к людям, темболее, к не знакомым, а не *учиться, да еще и на форуме.
0
santeyyy santeyyy
0
17.09.2019 15:21
спасибо добрый человек, так примерно и думал. Тогда нужно, так полагаю какой-то программой-пауком просканировать весь сайт и посмотреть все страницы, по группам и определить какие группы страниц отключить этой директивой. Может, подскажете такую программу, желательно бесплатную, на раз?
0
Ouroboros Ouroboros
1460
17.09.2019 20:12
Не за что.
Их много есть, но я использую Netpeak Seo Spider.
Она платная, но там есть 14-дневный триал, этого хватит с головой.
0