Почему сайт плохо индексируется – 6 распространенных причин

Часто бывает такое, что вебмастер работает над его оптимизацией – выкладывает качественный контент, распространяет в социальных сетях и другими способами привлекает пользователей, но в результате очень мало страниц в индексации или же они там появляются очень медленно. Этому могут быть разные причины, основные мы опишем в этой статье.

Диагностика проблемы

Но прежде необходимо удостовериться в том, что неполадки с индексацией сайта на самом деле существуют. Проверку можно выполнить при помощи сервисов Яндекс.Вебмастер и Google search Console.

В Яндекс.Вебмастер нужно зайти в раздел «Индексирование», подраздел «Страницы в поиске», в Google Search Console нужно зайти на раздел «Покрытие», подраздел «Индекс».

В этих разделах можно просмотреть все изменения насчет страниц вашего сайта: удаление и исключение страниц из индекса поисковых систем, можно просмотреть историю и узнать, заходит ли поисковый робот на сайт. Если добавленных в индекс страниц не было продолжительное время, значит, робот забыл про ваш сайт.

Также можно прибегнуть к поисковым командам: в строке поиска ввести запрос «site:exemple.ru» и в результатах поиска появятся все страницы, которые есть в индексе. Если страниц в поиске не будет или разница между результатами двух поисковиков очень большая, то это повод для выяснения причины, по которым сайт плохо индексируется.

Причина №1. Закрытый от индексирования сайт

Первым делом нужно заглянуть в файл robots.txt и посмотреть, нет ли там директив, закрывающих весь сайт от посещения поисковыми роботами. Нужно искать строку «disallow: /».

Частой причиной может быть неправильное функционирование тега noindex, вследствие чего от индексации закрылись нужные страницы. Также нужно посмотреть в настройках WordPress и SEO плагина не закрыт ли сайт для поиска. И нужно заглянуть в файл .htaccess  – не прописана ли там блокировка сканирования поисковыми роботами.

Причина №2. В базе поисковиков нет данных о сайте или странице

Обычно такая ситуация возникает у молодых сайтов, иногда регистрация в базе поисковой системы затягивается, и он не стоит в очереди на сканирование. Для посещения вашего сайта поисковым системам нужно минимум две недели после того, как они были добавлены Яндекс.Вебмастер и Google Search Console.

Причина №3. Сайт в бане поисковой системы

Яндекс и Google применяют санкции за различные правонарушения и заносят в черный список, в результате поисковый робот на такие сайты на заходит. Трудность этой ситуации в том, что сложно заметить, что произошел бан. В Яндекс.Вебмастере вы еще можете получить об этом уведомление, то в случае бана в Google определить причины, по которым сайт плохо индексируется, можно не всегда.

Фильтры применяются за нерелевантный контент или если он низкого качества, надоедливая реклама, ссылочный спам или есть он есть в семантическом ядре, искусственные поведенческие факторы, лишний или вредоносный код в страницах.

Причина №4. Технические ошибки на сайте

Обычно это грубые ошибки, исправив которые, плохая индексация пропадает, это могут быть:

• Некорректные HTTP-заголовки;
• Неправильные редиректы;
• Неправильно указана кодировка на страницах, которую поисковик видит как набор непонятных символов;
• Различные ошибки после сканирования, какие можно посмотреть в панелях для веб-мастеров;
• Перебои в работе хостинга – очень желательно, чтобы он работал стабильно;
• Нет файла sitemap.html или неправильная его настройка.

Причина №5. Низкое качество контента

Если контент не удовлетворяет требованиям, то поисковые системы немедленно применят санкции.

Основания для потери позиций:

• Неуникальность контента – полностью или частично скопированный контент с других сайтов или страницы с одинаковым содержимым.
• На многих страницах статьи с одинаковой структурой заголовков, и одни и те же мета-теги.
• Низкая скорость загрузки страниц из-за тяжелых картинок или громоздкого кода.

Если ваш сайт плохо индексируется, то первым делом нужно проверить описанные выше причины. При обнаружении проблем, не следует вдаваться в панику. Нужно собраться и устранить причины плохой индексации сайта или полного отсутствия этого процесса. На самом деле занесение данных о сайте в поиск – процесс достаточно простой. Но главная его проблема в инертности – он происходит долго, неделями. Поэтому результат ваших действий может быть виден не сразу.   

Запоминайте или записывайте действия, которые выполняйте в рамках улучшения индексации сайта. А затем, через некоторое время анализируйте результаты. Таким образом вы сможете понять, что именно приводит к тому или иному итогу.