Как разделить сайты в robots.txt?

Question

Как разделить сайты в robots.txt?

Вопрос следующего плана - есть сайт.ru, на вордпресс, а в другой папке с и в разных бд установлен дле, то есть получается
сайт.ru/dle/. Для
сайт.ru есть robots.txt, а где расположить robots.txt для
сайт.ru/dle/ ? В том же файле, после роботса для вордпресс? Подскажите, кто имел дело.

0

dle
сайт

Ответы на пост (5) Написать ответ

Быстрая регистрация для ответа Войти

Daiver

109

31.07.2012 14:40

Так это не два разных сайта.
Это один домен, но с двумя ЦМС.

Поэтому я считаю, что второй роботс не нужен.

З,Ы, Или еще как вариант кинь его в папку сайт.ru/dle/

0

romerfaker

228

31.07.2012 14:52

То есть в первый роботс просто добавлять например
Disallow: /dle/category
Disallow: /dle/history
или
Disallow: category
Disallow: history
?

0

minchanin

103

31.07.2012 15:53

нет, роботс 1 на весь сайт, а сайт.ru/dle/ это не сайт а некий подсайт. выноси в отдельные папки оба сайта

0

romerfaker

228

01.08.2012 14:22

cvark, спасибо!

0

Accepted Answer

Хоть сколько сайтов в папках, а роботс один к примеру -
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /сайт2/cgi-bin
Disallow: /сайт2/wp-admin
Disallow: /сайт2/wp-includes
Disallow: /сайт3/cgi-bin
Disallow: /сайт3/wp-admin
Disallow: /сайт3/wp-includes

HOST: сайт.ru

Как разделить сайты в robots.txt?

Похожие посты

Анализ сайта