Причины, почему страница может выпасть из индекса поисковых систем

Если страница перестала приносить конверсии, на нее снизился трафик, возможно, она выпала из индекса поисковых систем.

В статья я расскажу про основные причины, почему это происходит, и расскажу, что вы можете сделать прямо сейчас.

• Почему страница выпала из индекса: причины и следствия
  • На сайте некачественный контент
  • Переоптимизированный контент
  • Есть технические проблемы
  • На сайте дублируются страницы
  • Страница перенаправляет на другие
  • Плохое качество сайта
  • Некачественный ссылочный профиль
  • Поисковые системы наложили санкции
  • Ошибка со стороны поисковых систем
• Заключение

Единичные случаи не нанесут серьезного ущерба, но массовое выпадение повлечет снижение органического трафика и потерю позиций сайта. Но если оперативно среагировать на проблемы, можно минимизировать негативные последствия. Отдельно рассмотрим каждую причину с возможными решениями.

Почему страница выпала из индекса: причины и следствия

Простой способ проверить, находится ли страница в индексе поисковой системы — изучить отчет «Страницы в поиске» в Вебмастере:

Увидите список страниц сайта, которые не находятся в индексе и причину, по которой это произошло:

Так можно проверить через Google Search Console:

На сайте некачественный контент

Нарушение авторских прав строго пресекается поисковиками. Неоригинальный контент на странице легко может навлечь санкции со стороны поисковых систем, а это грозит исключением их из поиска. Периодическая проверка размещенных текстов сможет уберечь вас от таких последствий. В нашей студии мы активно пользуемся text.ru.

Так выглядит проверка текста на уникальность

Если сайт содержит малополезную информацию, нацелен только на продажу ссылок или размещение рекламы, его страницы постоянно будут испытывать проблемы с индексированием.

Решение одно: делать контент качественным и уделять внимание текстам: писать не для галочки, а отвечать на вопросы пользователей, которые его будут читать.

Переоптимизированный контент

Тексты, ориентированные только на поисковые системы, чаще всего содержат избыточное количество ключевых фраз и не несут практической пользы. Такие страницы исключаются из результатов поиска.

Вот текст про пластиковые окна. Посмотрите, сколько раз слово «окно» в нем повторяется:

Размещение на страницах невидимого текста с ключевыми фразами и использование черных методов продвижения не приносит необходимого результата. В случае этой проблемы рекомендация та же, что и в первом – качественная работа с контентом на сайте.

Есть технические проблемы

Рассмотрим самые распространенные проблемы, из-за которых страниц выпадают из индекса.

Первый вариант — неверный код ответа. HTTP-ответ сервера 404 Not Found делает страницу недоступной для поискового робота и закрывает ее от индексации.

В этом случае для мониторинга стоит использовать инструмент в Вебмастере «Проверка ответа сервера» .

Также индексирование страницы может быть запрещено в файле robots.txt или с помощью метатега с директивой noindex. В нашей студии было несколько таких случаев.

Клиент закрыл страницу в файле robots.txt, никого не проинформировав. Обнаружили это, когда в панели позиций запросы выпали из топа или встали на другую страницу. В Яндекс Вебмастере увидели, что страница выпала из индекса.

Мы самостоятельно отредактировали файл robots.txt и открыли страницу к индексации.

Второй случай. Технические специалисты закрыли страницы тегом robots=noindex в процессе выполнения доработок на сайте, а после завершения забыли открыть их обратно.

Нашли это во время проверки мета-тегов страницы через плагин SEO Meta in 1 click.

Также в Яндекс Вебмастере возникла фатальная ошибка, что страницы сайта закрыты от индексации. Мы оперативно обратились к техническим специалистам, чтобы они убрали тег, запрещающий индексацию.

Третий пример. Необычная ситуация случилась при обновлении плагина All in One SEO Pack. Все страницы товаров оказались закрыты от индекса, в настройках плагина. Заметили это только через несколько дней в Яндекс Вебмастере. Корректно настроили плагин и все нормализовалось. Причиной проблемы послужила отметка в настройках индексирования.

На сайте дублируются страницы

Дубли в целом негативно влияют на продвижение сайта, потому что поисковые системы хуже ранжируют страницы с похожим или одинаковым контентом. Все виды дублей – полные, частичные или смысловые – могут привести к выпадению страниц из индекса.

Используя оператор «site:» проверьте выдачу и найдите дубликаты.

Если сайт большой, ручной поиск не подойдет — слишком много страниц. Можно воспользоваться сервисом ApollonGuru:

Решением будет установка тега «rel=canonical» или настройка 301 редиректа для страниц дублей, а также можно прибегнуть к удалению дубликатов. В первом варианте нужно в <head> страниц-дублей указать ссылки, которые ведут на необходимую страницу:

<link rel=»canonical» href=»http://magazin.com/page1.html»/>

Страница перенаправляет на другие

Может быть неверно настроен 301 редирект, или страница перенаправляет робота на URL, который не является каноническим. Например, человек должен перейти в раздел сапоги, но его перенаправляет на страницу ботинок. В первом случае нужно воспользоваться инструментом «Проверка ответа сервера» в Яндекс Вебмастере.

Во втором – проверить URL, указанный в атрибуте rel=»canonical».

Плохое качество сайта

Любая поисковая система нацелена на показ качественных результатов пользователю. Агрессивная реклама, всплывающие окна, неудобное меню, проблемы с навигацией, поиском по сайту, дизайном и юзабилити – приводят к санкциям.

Помимо этого, сайт должен вызывать доверие. Особенно это касается сайтов услуг и интернет-магазинов. Полные контакты юридического лица, информация о гарантии, самой покупке и о компании в целом – все это влияет на ранжирование. Уделяйте должное внимание наполненности сайта и размещении достоверных сведений.

Некачественный ссылочный профиль

Ссылочная цитируемость – важный фактор ранжирования. Но бессистемная закупка ссылок, большое количество ссылающихся ресурсов за короткое время, а также злоупотребление продажей ссылок приводят к проблемам. Поскольку поисковые системы борются с такими методами продвижения сайта и исключают их из поиска. Стратегия закупки ссылок должна быть грамотно спланирована еще в начале работ с сайтом.

Поисковые системы наложили санкции

Фильтры могут быть наложены по разнообразным причинам. Все указанные ранее нарушения чаще всего влекут за собой санкции, но это далеко не полный список. Поэтому лучше постоянно отслеживать проблемы с помощью инструментов Search Console Google и «Яндекс.Вебмастер».

Ошибка со стороны поисковых систем

Вероятность ошибки алгоритма поисковых систем довольно мала, но имеет место быть. В таком случае вы можете написать в поддержку Яндекса/Google, чтобы прояснить ситуацию.

Заключение

Если считаете, что страница выпала, то сначала проверьте сайт с помощью инструментов Search Console Google и «Яндекс.Вебмастер», потом с помощью краткого чек-листа определите причину выпадения из индекса:

• некачественный контент;
• переоптимизация;
• технические проблемы;
• дубли страниц;
• плохое качество сайта;
• линкбилдинг;
• фильтры ПС.

В заключение, нужно напомнить, что сайт нуждается в постоянном мониторинге. Сейчас для этого достаточно инструментов. Оперативное реагирование на проблемы способно минимизировать последствия даже от санкций поисковых систем.

Источник