SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Яндекс плохо индексирует сайт. Почему?

Аружан Джазильбекова Аружан Джазильбекова  
53
  13.09.2017 12:26       2 446    
Подскажите почему Яндекс плохо индексирует сайт в вебмастере 300000 страниц собрал а проиндексировал всего 1100, а гугл 53800 проиндексировал

Ответы на пост (104) Написать ответ
Sergexpert Sergexpert
451
13.09.2017 12:39
А можно посмотреть хоть на эти страницы для начала? 300000 ух интересно сколько же сайту лет?
0
Решение
доска объявлений
0
http://kolesakz.kz/
0
Не могу понять почему может срок маленький сайту года нет, а может из-за того что дизайн поменяла и старые страницы остались в поиске, а я их не удаляла сам Яша их удаляет
0
Sergexpert Sergexpert
451
13.09.2017 12:55
У поисковых машин есть такие понятия, как СТРАНИЦА НЕДОСТАТОЧНО КАЧЕСТВЕННАЯ И ОНА НЕ ПРЕТЕНДУЕТ НА ПОИСК.
0
Sergexpert Sergexpert
451
13.09.2017 12:57
Вот к примеру http://kolesakz.kz/prodazha-gruzovyh-avto/furgonov/ что там есть?
0
ничего пока нет
0
три объявления всего
0
Sergexpert Sergexpert
451
13.09.2017 13:00
Ну скиньте раздел, который должен присутствовать в поиске, а его там нет.
0
я конечно не во всех категориях прописала титл и дискрипшн но поисковики и без этого индексируют
0
какой раздел
0
имеете ввиду какие то виды фургонов
0
Sergexpert Sergexpert
451
13.09.2017 13:01
Который по вашему мнению нет в поиске, а должен там быть
0
Не поняла какой раздел там должен быть по вашему
0
вы имели ввиду типа вот как здесь http://kolesakz.kz/prodazha-avto/hyundai/
0
Sergexpert Sergexpert
451
13.09.2017 13:05
Может я Вас не понял? Подскажите почему Яндекс плохо индексирует сайт в вебмастере 300000 страниц собрал а проиндексировал всего 1100, а гугл 53800 проиндексировано


Сколько по вашему должно примерно быть страниц в поиске?
0
1100 страниц и категорий мало при том что яндекс собрал как минимум он должен проиндексировать половину
0
хоть они и без объявлений я понимаю что я не везде прописала титлы и дискрипшн но я это делаю по мере добавления категорий потому что когда сразу добавляешь категории и не прописываешь титлы и дискрипшн то яша и гугл индексируют дискрипшн с главной страницы и это получается не по теме категорий
0
и чтобы потом переиндексировать нужно время и заново показывать пс эту категорию что она изменилась
0
вопрос вообще стоял про то почему так плохо индексирует яша
0
Sergexpert 19 минут назад
У поисковых машин есть такие понятия, как СТРАНИЦА НЕДОСТАТОЧНО КАЧЕСТВЕННАЯ И ОНА НЕ ПРЕТЕНДУЕТ НА ПОИСК.
Это то что вы написали не относится к данной странице данная страница как раз то находится в поиске http://kolesakz.kz/prodazha-gruzovyh-avto/furgonov/
Продажа фургонов / Продажа грузовых авто / Колеса kz.
Страница обходится роботом и находится в поиске.
Статус в поисковой базе:200OK
Версия страницы: 09.09.2017 – 16:11
Последний обход:200OK
Версия страницы: 11.09.2017 – 13:00
0
данная страница не текстовый контент а категория
0
Sergexpert Sergexpert
451
13.09.2017 13:19
Да блина собрать он у Вас может и миллион страниц всякого ХЛАМА. А в поиск отправит только те, которые действительно соответствуют всем требованиям. Поисковики сегодня индексируют быстро. Отправил на переобход и к вечеру она уже в поиске. ЕСЛИ ЧЕСТНО Я ВАС ПРОСТО НЕМНОГО НЕДОПОНИМАЮ.
0
меня интересует почему он в поиск не отправляет те категории в которых нет объявлений
0
он отправляет категории в поиск только те которые я сама ему показываю через вебмастер тогда он их в поиск загоняет, а которые сам индексирует не ставит
0
Sergexpert Sergexpert
451
13.09.2017 13:32
Когда Вы ему показываете категории, он наверное думает надо взять вдруг в ней появится что не будь ценное. Время прошло, а там нечего не появилось он ее выкинул.

а которые сам индексирует не ставит. Они тоже наверное пустые?
0
Sergexpert Sergexpert
451
13.09.2017 13:35
Попробуйте задать этот вопрос Платошкам, что они скажут по этому поводу.
0
Sergexpert Sergexpert
451
13.09.2017 13:39
Для начало наверное не помешает в категории добавить немного описания. Вот к примеру ДЕТСКИЕ ВЕЛОСИПЕДЫ ЧТО? ГДЕ? КОГДА?
0
куда добавить описание
0
https://www.avito.ru/rossiya/velosipedy
0
Sergexpert Sergexpert
451
13.09.2017 13:47
В категории
0
я например даже на авито не вижу описание
0
Sergexpert Sergexpert
451
13.09.2017 13:48
Ну так держать! Авито и Ваш проект две большие разницы. У них там каждую секунду строчки штампуются.
0
в категории должны быть объявления, это же доска
0
http://kolesakz.kz/velosipedi/detskie/ в этой категории титл заполнен (Детские велосипеды в Казахстане - Колеса kz.) дискрипшн тоже заполнен (Купить новые и б/у детские велосипеды в Казахстане на колеса kz Объявления велосипеды для детей от частных лиц в Казахстане на сайте колеса kz.)
0
я не сравниваю свой сайт с авито при чем тут это я сказала что в категориях не стоит описание даже на авито. Авито конечно это другой уровень, у них даже дискрипшн закрыт от индексирования а страницы и категории стоят в топе все это из-за того что сайту много лет и он у всех на устах а также и юзабилити у них по сравнению с другими сайтами выше уровня любого сайта на порядок
0
Sergexpert Sergexpert
451
13.09.2017 14:01
Ну ведь можно же к примеру так сделать описание: в данном разделе подают и покупают детские велосипеды, как частные лица, так и коммерческие организации. Это только пример.
0
Sergexpert Sergexpert
451
13.09.2017 14:03
Это анкорчик яндекс возьмет в поиск, а не разброс ключей, которые там будут когда люди начнут давать объявления КУПИТЬ ВЕЛОСИПЕД, ПРОДАТЬ ВЕЛОСИПЕД и т.д.
0
там есть разделение если хорошо посмотреть от частных лиц и магазинов и Все
0
Спасибо большое за помощь но ответа не получила по поводу вопроса
0
Буду дальше делать титлы и дискрипшн к категориям может на старости лет сайт запоет!!!)))))))
2
izbyshki_ru izbyshki_ru
77
13.09.2017 14:34
Настройки - Основные настройки - СЕО
смотрим
- Запретить индексировать страницы рубрик, в которых нет объявлений
- Запретить индексировать страницы регионов
- Запретить индексировать модуль поиска по объявлениям
0
izbyshki_ru izbyshki_ru
77
13.09.2017 14:37
Хотя может быть дело в другом.
У меня такой же движок. Ситуация похожая, но только
в индексе (т.е. в поиске) Яндекса 250к, а Гугла всего 10к. Сайту 3 мес.
0
izbyshki_ru izbyshki_ru
77
13.09.2017 14:39
По результатам тестирования время ответа вашего сервера составило 2,2 секунды
0
izbyshki_ru izbyshki_ru
77
13.09.2017 14:40
https://developers.google.com/speed/pagespeed/insights/
0
izbyshki_ru izbyshki_ru
77
13.09.2017 14:41
Добро пожаловать в клуб Elite-Board
0
izbyshki_ru izbyshki_ru
77
13.09.2017 14:47
Ответ "http://kolesakz.kz/" → Основной робот Яндекса
Код статуса HTTP 200 OK
Время ответа сервера 2736 мс
IP сайта 185.98.7.127
Кодировка UTF-8(unicode-1-1-utf-8, UTF8)
Размер страницы 166,77 КБ
0
вы это с России тестировали а надо тест делать с Казахстана тогда другой ответ будет
0
izbyshki_ru izbyshki_ru
77
13.09.2017 14:48
могу подсказать решение проблемы :)
1
подскажите и если можно скиньте ссылку на ваш сайт посмотрю как вы сделали
0
imtii imtii
91
13.09.2017 16:46
Аружан вы казах? :-)

1. В отличии от Google , у Яндекс другой алгоритм работы. Ещё в начале я заметил что Яндекс проверяет и патом добавляет. При скорость максимум 100 в день проходят проверки (тестировал в 6 разных сайтах). Страницы с одинаковыми адресами/контентами которые уже есть в базе не проходят если совпадает больше 70%.

А у Google : он с перва добавляет а патом спустя 24-72 часов проверяет аналог контента в своем базе а патом уже удаляет страницу.

2. Sitemap и важность категории, страницы, новости. Создайте sitemap.xml и пропишите важность индексирование.

3. Убедитесь чтобы ваш контент был разными от конкурентов. Тоже : URL статьи, Название - Уникальный синоним. Заспамленность страницы.


Один них у вас будет играть главный роль для решения этой проблемы.
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:09
Скорее всего казашка. т.е. девушка
0
насчет карты sitemap.xml это все есть, а по поводу индексирования тут совсем другое сайты все по разному индексируются Контентные т.е. статейники там свои условия для каждого пс а для доски это все зависит уже от посещения (юзабилити) и сео оптимизации
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:04
Драсте-приехали. При чём здесь страна...
У Вас в Казахстане какой поисковик?
Зайдите в Яндекс-Вебмастер и проверьте сами.
Вот ещё сервис проверки для более расширенного тестирования:
https://tools.pingdom.com/


По данным Яндекса: Время ответа сервера 2736 мс
Могу сказать, что это ещё не предел, так как у меня она составляла около 4-4.5 сек.

Решение:
Настройки - Основные настройки - Обслуживание БД
для параметра "С какой периодичность прослеживать изменения в динамических css и js файлах"
поставьте, например, значение 600
Время ответа сервера должно стать в пределах 50-100 мс
0
у меня стоит 60 сек
0
Ответ "kolesakz.kz" → Основной робот Яндекса

Код статуса HTTP 200 OK
Время ответа сервера 2424 мс
IP сайта 185.98.7.127
Кодировка UTF-8(unicode-1-1-utf-8, UTF8)
Размер страницы 166,72 КБ
0
да все равно хоть и поменяла на 600 такие же значения
0
хотя поменялось сейчас уже показывает вот так Ответ "kolesakz.kz" → Основной робот Яндекса

Код статуса HTTP 200 OK
Время ответа сервера 905 мс
IP сайта 185.98.7.127
Кодировка UTF-8(unicode-1-1-utf-8, UTF8)
Размер страницы 166,72 КБ
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:07
в
https://tools.pingdom.com/
выбирайте ближайшую страну
Швеция
Ваши результаты сейчас:

Load time
3.93 s
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:16
Кэширование включено в админке и на сервере?
0
а на сервере сейчас заявку на хостинг дала чтобы подключили кеширование на данном сайте и сжатие и плюс дополнительно подключили memcache
0
кеширование в админке включено
0
Sergexpert Sergexpert
451
13.09.2017 17:23
Все фотки сожмите с помощью вот этого сервиса http://optimizilla.com/ru/. Таким образом сайт станет быстрее, как будто ему пинка дали для разгона.
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:19
ну уже лучше стало, но надо доводить дело до 50-80 мс
0
спасибо только не знаю как
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:20
memcache не советую подключать. Оно не даёт никакого эффекта и даже может только навредить
0
почему не дает никакого эффекта
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:23
Установите в админке следующие значения:
С какой периодичность прослеживать изменения в динамических css и js файлах - 600
Кэширование данных - Кэшировать в файлах
Оптимизировать длинные запросы - галочка есть
Кэшировать объявления - галочки нет
Сделать окно регионов через ajax (если список регионов слишком большой) - тут надо смотреть на работу движка.
С галочкой время ответа уменьшается на 30%, но у меня без галочки, так как не открывается окно регионов
0
Установите в админке следующие значения:
С какой периодичность прослеживать изменения в динамических css и js файлах - 600 Это поставила
Кэширование данных - Кэшировать в файлах - тоже поставила
Оптимизировать длинные запросы - галочка есть - ЕСТЬ
Кэшировать объявления - галочки нет - А здесь стоит галочка
Сделать окно регионов через ajax (если список регионов слишком большой) - тут надо смотреть на работу движка. Не знаю как делать окно регионов через ajax
С галочкой время ответа уменьшается на 30%, но у меня без галочки, так как не открывается окно регионов
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:27
Если после этого не добились результатов в 50-70 мс, то следует перейти к настройке сервера
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:31
Факторов очень много. Начиная от настроек в админке, настроек сервера, ресурсов (мощности) сервера и заканчивая хостингом.
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:33
Не знаю как делать окно регионов через ajax - оно подключается автоматически, если поставить галочку.
0
Какой Размер загружаемых фото по ширине поставить лучше стоит 500
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:37
У Вас виртуальный хостинг или VPS?
0
простой хостинг
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:41
Размер загружаемых фото по ширине - я поставил 700
Но Вы не заморачивайтесь над оптимизацией изображений в объявлениях. Когда их 1-2 в день, то да, можно.
А когда их десятки, то это ж... есть

Оптимизируйте только шаблонные картинки.
0
скиньте в личку ваш сайт я хотела посмотреть если можно
0
Sergexpert Sergexpert
451
13.09.2017 18:33
Тут надо искать выход другой. Для ворпрес к примеру есть плагин WP Smush, который фотки автоматом жмет. Для авторского движка, скорее всего придется заказывать дополнение. Все таки доска объявления, а х...й собачий. А конкретно, все учитывать заранее вдоль и поперек. Не переживайте вместе мы кулак, а кулак это сила. Сделаем мы АВИТУ и порвем ее на Британский флаг.
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:43
Хостер ещё не ругается на высокую нагрузку?
Есть ли на хостинге ограничения CPU?
0
нет не ругается
0
Sergexpert 16 минут назад
Все фотки сожмите с помощью вот этого сервиса http://optimizilla.com/ru/. Таким образом сайт станет быстрее, как будто ему пинка дали для разгона.
0
Большое спасибо про такое не знала займусь этим только сколько процентов лучше оптимизировать
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:46
http://img-resize.com/
уменьшает размер и оптимизирует
0
izbyshki_ru izbyshki_ru
77
13.09.2017 17:52
Вообще движок требует достаточно серьёзных серверных ресурсов.
Даже при нулевой посещаемости, но при высоком количестве страниц в индексе ПС, роботы этих ПС создают колосальную нагрузку.
0
А можно спросить насчет вот этого как это устранить:
JS, CSS в верхней части
В верхней части страницы найден блокирующий CSS: 7.

В верхней части страницы найден блокирующий JS: 1.
0
izbyshki_ru izbyshki_ru
77
13.09.2017 18:02
На это не обращайте внимания. Это особенности движка.
0
Sergexpert Sergexpert
451
13.09.2017 18:10
процентов лучше оптимизировать он делайте без каких либо настроек. Он сам нормально оптимизирует. С человеческого взгляда разницу не определить.
0
Sergexpert Sergexpert
451
13.09.2017 18:12
А для эксперимента попробуйте сначала одну страницу. И посмотрите что было до и стало после. Разница будет заметная. Я всегда только этому сервису и доверяю. Больше никаким не верю https://developers.google.com/speed/pagespeed/insights/
0
izbyshki_ru izbyshki_ru
77
13.09.2017 18:29
ну-ну, Вам виднее.
Время ответа сервера и скорость загрузки сайта - это разные вещи.
Гугль показывает общую картину, учитывая только основные характеристики.
0
Sergexpert Sergexpert
451
13.09.2017 18:14
Да кстати тот сервис, который я скинул он не уменьшает размеры изображения он их только сжимает. Короче сами все увидите.
0
Большое спасибо уже попробовала классный сервис
0
надо время уделить и все фото на сайте сжать тогда наверное он быстрее будет работать
0
Sergexpert Sergexpert
451
13.09.2017 18:25
Еще ка быстрее. Я всегда сжимаю на всех проектах. Если без сжатия, мне показывает для мобильных 59 для компов 67. А со сжатием 70-87. Вот и разница.
0
izbyshki_ru izbyshki_ru
77
13.09.2017 18:49
Сжимайте дальше. И не морочьте голову Аружан.

Показатели Гугля - это всё ерунда.

Объясняю.
Я тоже начинал с рекомендаций Гугла. Оптимизировал (сжал) аж до нуля.
Добился показателя от Гугля аж 94 / 100.
Но при этом скорость ответа сервера составляла 4,5 - 5,5 секунд(!)
Пользователи не дожидались открытия страницы и сваливали. Пять секунд ждать - да и сам такой же, сайт тупит - в топку.
ПС при обходе сайта тоже реагируют на такой тормоз сайта.

Например, только что страница http://kolesakz.kz/users/register/ у меня на компе открывалась секунды 4-5, а скорость ответа сервера составила 2 секунды.

Оптимизация картинок - дело хорошее и даёт небольшой процент к скорости загрузки сайта, но это не самое главное!


По специфике наших с Аружан проектов оптимизировать картинки по сто раз в день - это весьма проблематично, да и не к чему.

По данным Вашего (Sergexpert) любимого developers.google.com/speed/pagespeed/insights
у меня сейчас показатели для ПК:

Poor
62 / 100

Ой-ой как плохо!!! Скажете ВЫ!

А сайт у меня открывается со скоростью света.
Время ответа сервера составляет - 70 мс.


Ну и для Sergexpert персонально:
если на сайте установлены Яндекс-Метрика, счетчики рамблера, мейл.ру, ulogin, то это всё тоже влияет на показатели Вами упомянутого сервиса, которые дают в минус 20-50 пунктов.
0
izbyshki_ru izbyshki_ru
77
13.09.2017 19:01
Аружан, у меня сайт не индексировался вообще, пока я не решил проблему со скоростью загрузки.
Проблему решал совместно с разработчиком скрипта и его программистами совместно с нанятым специалистом по настройке серверов. Ушло немало времени и нервов. Думаю, что каждый случай индивидуален и зависит от версии движка, сборки, железа и провайдера.

По данным PageSpeed Insights Ваш проект сейчас оптимизирован лучше, чем мой.
Но сайт открывается в 20 раз дольше.
Выводы делайте сами.
0
Sergexpert Sergexpert
451
13.09.2017 19:27
Если на это пошло скажите, а разве подобные доски делают на общих серверах? НЕТ конечно и спор тут неуместен. Вот может и в тему https://beget.com/ru/dedicated-servers
0
я написала вам в личку ответьте
0
Sergexpert Sergexpert
451
13.09.2017 19:31
Аружан, у меня сайт не индексировался вообще, пока я не решил проблему со скоростью загрузки. Да бред это все. Сайт по любому будет индексироваться. Скорость сайта на индексацию не влияет. А вот на ранжирование еще как.
0
izbyshki_ru izbyshki_ru
77
13.09.2017 19:36
Sergexpert, к сожалению мы говорим о разных вещах.
Кто про Фому, а кто про Ерёму.
0
Sergexpert Sergexpert
451
13.09.2017 19:43
Да при чем тут это. Вы сами превратили тему от индексации, до скорости. Вы же с толку Аружан и сбили.
0
izbyshki_ru izbyshki_ru
77
13.09.2017 19:45
А подобные доски делают на общих серверах, если конечно у вас не АВИТО.
Просто у многих хостеров есть ограничения типа:
Допустимая нагрузка на CPU Web 7% (100cp)
Допустимая нагрузка на CPU MySQL 1 400 с


-----------------------------
"На процессы пользователя накладываются следующие ограничения:
- максимальное количество одновременно выполняемых задач - 10
- максимальное допустимое время работы скрипта: не более 2 процессорных минут
- максимальное количество открытых файлов на один процесс - 10
- максимальное использование памяти на процессы пользователя - 0,2 Гб
- максимальный размер файла - 0,2 Гб

На php-скрипты накладываются следующие ограничения:
- максимальное время выполнения (max_execution_time) - 60 секунд
- максимальное использование памяти (memory_limit) - 128 Мб

Максимальное количество одновременных http соединений - 20 для тарифов виртуального хостинга
Максимальное количество одновременных соединений с сервером БД MySQL - 50
Максимальное количество FTP-подключений от одного пользователя или с одного IP-адреса - 2.
Максимальное количество файлов на аккаунте - 100 000.

Максимальное количество писем отправляемых через наш smtp сервер - не более 100 писем в час.
Размер одного письма ограничен 5 Мб
Письмо должно иметь не более 5 получателей (поля TO, CC, BCC)

В случае превышения лимитов процессы, вызывающие перегрузку, могут быть отключены. В случае, если подобное превышение лимитов происходит систематически и Абонент не принимает мер по нормализации ситуации, после предупреждения ресурс может быть заблокирован."
----------------------------


А у некоторых таких ограничений нет, но зато есть ошибка 500, 502, 504.


Я за 3 месяца сменил 4 хостинг компании.
Сейчас сайт летает на недорогом VPS. Ноу проблем.



0
Меня с толку никто не сбил все нормально спасибо всем за дельные советы многое оказывается сегодня узнала которое мне поможет в дальнейшем
0
izbyshki_ru izbyshki_ru
77
13.09.2017 19:48
Аружан, видел в личке вопрос. Сидел сочинял ответ полчаса и потом случайно обновил страницу.
Текст был большой, заново писать не хочу уже.

Отпишусь сейчас вкратце
0
я еще один вопрос написала в личку
0