SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Почему не определяется Robots.txt?

ig2806 ig2806  
1
  24.12.2016 00:17       782    
Здравствуйте.Создаю текстовый файл под названием robots.txt.Загружаю в папку publik_html но вебмастер гугле его не видит.Файл robots.txt не найден.Что за проблема?

Ответы на пост (9) Написать ответ
garik1331 garik1331
1434
24.12.2016 00:40
Вы сайт то выберете в какой сувать, вот туда и пихайте
0
ig2806 ig2806
1
24.12.2016 00:45
Я все нормально выбрал.в вебмастере яндекса все нормально в гугле нет.И в браузере нормально открываеться
0
garik1331 garik1331
1434
24.12.2016 00:47
Ну тогда хз, попробуйте другой метод, но у меня не один не катит кроме фаила
0
ig2806 ig2806
1
24.12.2016 00:49
Вот смотрите http://vopros-otvet.online/robots.txt Что этот гугл ослеп
0
slava0708 slava0708
83
24.12.2016 04:05
Зашел,-страница не найдена
0
slava0708 slava0708
83
24.12.2016 04:07
Прости,норм все открылось))
0
Petroff Petroff
698
24.12.2016 10:00
Как вариант

User-agent: *
Disallow: /admin/general
Disallow: /admin/points
Disallow: /admin/spam
Disallow: /admin/plugins

Sitemap: http://vopros-otvet.online/sitemap.xml
0
ftorn ftorn
28
24.12.2016 12:38
Попробуйте вторую строку удалить, где пустой "Disallow:" - возможно её гугл воспринимает, как запрещать скачивать всё, в том числе и robots.txt
0
Godox Godox
80
24.12.2016 15:42
User-agent: *

Allow: /
Disallow: /admin/general
Disallow: /admin/points
Disallow: /admin/spam
Disallow: /admin/plugins

Sitemap: http://vopros-otvet.online/sitemap.xml
host: vopros-otvet.online всегда было...
0