Как разделить сайты в robots.txt?

romerfaker romerfaker  
242
  31.07.2012 14:26       928     Помощь  
Вопрос следующего плана - есть сайт.ru, на вордпресс, а в другой папке с и в разных бд установлен дле, то есть получается 
сайт.ru/dle/.  Для 
сайт.ru есть robots.txt, а где расположить robots.txt для 
сайт.ru/dle/ ? В том же файле, после роботса для вордпресс? Подскажите, кто имел дело.

Ответы на пост (5) Написать ответ
cvark cvark
105
31.07.2012 19:09
Хоть сколько сайтов в папках, а роботс один к примеру -
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /сайт2/cgi-bin
Disallow: /сайт2/wp-admin
Disallow: /сайт2/wp-includes
Disallow: /сайт3/cgi-bin
Disallow: /сайт3/wp-admin
Disallow: /сайт3/wp-includes

HOST: сайт.ru
1
Решение
Daiver Daiver
110
31.07.2012 14:40
Так это не два разных сайта.
Это один домен, но с двумя ЦМС.

Поэтому я считаю, что второй роботс не нужен.

З,Ы, Или еще как вариант кинь его в папку сайт.ru/dle/
0
romerfaker romerfaker
242
31.07.2012 14:52
То есть в первый роботс просто добавлять например
Disallow: /dle/category
Disallow: /dle/history
или
Disallow: category
Disallow: history
?
0
minchanin minchanin
104
31.07.2012 15:53
нет, роботс 1 на весь сайт, а сайт.ru/dle/ это не сайт а некий подсайт. выноси в отдельные папки оба сайта
0
romerfaker romerfaker
242
01.08.2012 14:22
cvark, спасибо!
0