wplearn.ru wordpress WPLearn

Как исправить ошибки индексации сайта на WordPress

Если страницы WordPress не попадают в поиск или уже были в индексе, но потом исчезли, почти всегда проблема не в «магии Яндекса или Google», а в конкретной технической причине: запрет в robots.txt, метка noindex, неправильный canonical, цепочка редиректов или ошибки в карте сайта. Исправлять нужно не вслепую, а по цепочке: сначала понять, что именно мешает индексации, потом убрать препятствие и только после этого просить поисковик переобойти страницы.

Ниже — практический порядок проверки, который подходит для большинства сайтов на WordPress. Он не требует глубокого знания PHP, но помогает найти причину быстрее, чем перебор всех настроек подряд.

С чего начать проверку, если страница не индексируется

Сначала убедитесь, что проблема действительно в индексации, а не в другом. Откройте нужную страницу в браузере и проверьте три вещи:

  • страница открывается по основному адресу без ошибок 404, 500 и без бесконечного редиректа;
  • в исходном коде нет явного запрета на индексацию;
  • страница не дублируется под другим URL, который поисковик считает основным.

Если сайт новый, отсутствие страниц в поиске в первые дни — нормальная ситуация. Но если URL уже был в индексе и пропал, почти всегда есть технический сигнал, который изменился: настройка плагина, обновление темы, смена структуры ссылок, правка robots.txt или массовый редирект.

Проверьте, не закрыт ли сайт от индексации в WordPress

Самая частая ошибка — случайно включённая опция, которая запрещает поисковикам индексировать сайт. В WordPress она находится в разделе Настройки → Чтение. Там есть пункт вроде «Попросить поисковые системы не индексировать сайт». Если он включён, WordPress добавляет сигнал, который может мешать индексации.

Это особенно часто случается на тестовых копиях, после переноса сайта или когда разработчик забывает снять галочку перед запуском проекта. После отключения настройки сохраните изменения и проверьте главную страницу и несколько внутренних URL.

Если на сайте стоит SEO-плагин, он тоже может добавлять мета-тег noindex на отдельные типы страниц: записи, рубрики, архивы, страницы автора, результаты поиска. Это не ошибка само по себе, но если вы хотите видеть конкретную страницу в поиске, нужно проверить именно её шаблон и настройки плагина.

Как найти noindex в коде страницы

Даже если в админке всё выглядит нормально, страница может быть закрыта от индексации на уровне HTML. Откройте исходный код страницы и найдите строку с meta name="robots". Если там есть noindex, поисковик не должен добавлять страницу в индекс.

Пример такого сигнала:

<meta name="robots" content="noindex, follow">

Иногда вместо мета-тега используется заголовок ответа сервера X-Robots-Tag. Его не видно в HTML, поэтому проверять нужно через инструменты разработчика браузера, онлайн-проверку заголовков или команду curl на сервере, если у вас есть доступ к консоли.

Если noindex стоит на нужной странице по ошибке, ищите источник в одном из мест:

  • настройки SEO-плагина для конкретной записи или страницы;
  • шаблон темы, который вручную выводит robots-метку;
  • серверные правила или настройки хостинга;
  • кэш, который отдаёт старую версию страницы после исправления.

Проверьте robots.txt: он может блокировать обход, а не только индексацию

Файл robots.txt не удаляет страницу из индекса напрямую, но может мешать поисковику её обходить. Если бот не может открыть страницу, он хуже понимает её содержимое и изменения. Для новых страниц это особенно критично.

Откройте https://ваш-домен/robots.txt и посмотрите, нет ли там жёстких запретов вроде:

User-agent: *
Disallow: /

Такой вариант полностью закрывает сайт от обхода. Иногда он остаётся после разработки или появляется из-за плагина, который генерирует robots.txt автоматически. Для обычного публичного сайта это почти всегда ошибка.

Также проверьте, не закрыты ли важные разделы: /wp-content/, /uploads/, страницы записей, рубрик или пользовательские типы записей. Полный запрет на служебные каталоги может быть нормальным, но запрет на контентные URL — уже проблема.

Если вы редактируете robots.txt вручную, делайте это осторожно: одна лишняя строка способна закрыть весь сайт от обхода. После правки проверьте файл в браузере и убедитесь, что он отдаётся без ошибок и не блокирует нужные URL.

Канонический URL должен указывать на правильную страницу

Канонический адрес помогает поисковику понять, какая версия страницы основная. Если canonical указывает на другой URL, поисковик может считать текущую страницу дублем и не включать её в индекс как самостоятельную.

Типичная проблема на WordPress — когда:

  • страница доступна с параметрами, а canonical указывает на чистый URL;
  • внутренняя страница ошибочно ссылается canonical на главную;
  • дубли создаются из-за http/https, www/без www или со слэшем/без слэша;
  • SEO-плагин подставляет canonical не для того шаблона.

Проверьте исходный код страницы и найдите тег link rel="canonical". Он должен вести на ту же страницу, которую вы хотите видеть в поиске, и без лишних параметров. Если canonical указывает не туда, исправьте настройку плагина, шаблон темы или правила генерации URL.

Важно: canonical — это рекомендация для поисковика, а не жёсткий запрет. Но если он систематически указывает на другой адрес, страница может выпадать из индекса или не ранжироваться отдельно.

Редиректы: когда страница есть, но поисковик видит не её

Если URL постоянно перенаправляется на другой адрес, в индекс может попасть уже не исходная страница, а конечная. Это нормально, если редирект задуман. Проблема возникает, когда редирект сделан случайно или ведёт через цепочку из нескольких переходов.

Проверьте такие сценарии:

  • страница редиректит с http на https, потом на www, потом ещё раз на URL со слэшем;
  • старый адрес ведёт на нерелевантную страницу вместо ближайшего аналога;
  • редирект настроен на главную, хотя должен вести на конкретный новый материал;
  • плагин редиректов конфликтует с правилами сервера или CDN.

Для поисковой индексации лучше, когда у страницы один конечный адрес без лишних переходов. Если вы меняли структуру сайта, проверьте, что старые URL перенаправляются на самые близкие по смыслу новые страницы, а не на главную. Массовый редирект на главную часто ухудшает индексацию и может выглядеть как мягкая ошибка 404.

Карта сайта должна содержать только реальные и индексируемые URL

XML-карта сайта помогает поисковику быстрее находить страницы, но сама по себе не гарантирует индексацию. Если в sitemap попадают лишние, закрытые или редиректящие URL, это создаёт шум и мешает диагностике.

Проверьте карту сайта по таким признакам:

  • в ней есть только страницы, которые должны индексироваться;
  • в ней нет URL с noindex;
  • в ней нет страниц, отдающих 301/302;
  • в ней нет 404 и несуществующих адресов;
  • в ней используются канонические URL, а не дубли.

Если у вас SEO-плагин формирует sitemap автоматически, убедитесь, что в него не попадают архивы, служебные страницы и контент, который вы не хотите показывать в поиске. После исправления карты сайта обновите её в панели для вебмастеров и отправьте на переобход.

Если карта сайта генерируется самим WordPress или плагином, а в ней есть ошибки, причина обычно в настройках типов записей, таксономий или в конфликте плагинов. В таком случае полезно временно отключить лишние SEO-расширения и проверить, какой именно модуль подставляет неправильные URL.

Как понять, что проблема исправлена

После правок не ждите мгновенного результата. Сначала проверьте техническую сторону, потом — реакцию поисковика.

Минимальный порядок проверки такой:

  1. страница открывается без редирект-цепочек и без ошибок;
  2. в HTML нет noindex и неправильного canonical;
  3. robots.txt не блокирует нужный URL;
  4. в sitemap есть правильный адрес страницы;
  5. в панели для вебмастеров страница доступна для переобхода.

Если у вас есть доступ к Google Search Console или Яндекс Вебмастеру, отправьте страницу на проверку после исправления. Но сначала убедитесь, что проблема устранена технически: иначе поисковик просто снова увидит те же ошибки.

Когда проблема не на стороне WordPress

Иногда WordPress настроен правильно, а индексацию ломает внешний слой: CDN, серверный кэш, правила nginx или Apache, плагин безопасности, прокси или хостинг-панель. Это особенно заметно, если в браузере всё выглядит нормально, а в заголовках ответа остаются старые директивы noindex или редиректы.

Если вы уже проверили WordPress, но страницы всё равно не индексируются, смотрите:

  • не отдаёт ли сервер старую версию robots.txt;
  • не добавляет ли хостинг заголовок X-Robots-Tag;
  • не кешируется ли страница на уровне CDN;
  • не переписывают ли правила сервера canonical-адрес или редиректы.

В таких случаях полезно сравнить ответ страницы напрямую и через браузер. Если есть расхождение, проблема почти наверняка в кэше или серверной конфигурации, а не в самой записи WordPress.

Если нужен практичный способ снизить риск дублей и технических SEO-ошибок в WordPress, обычно удобнее использовать один нормальный SEO-плагин и не смешивать несколько решений с пересекающимися функциями. Но саму индексацию он не «починит» автоматически: сначала нужно убрать запреты, дубли и неправильные адреса.

Когда вы проходите по этой цепочке без пропусков, причина обычно находится быстро. В WordPress ошибки индексации почти всегда связаны не с содержимым страницы, а с тем, как она отдается поисковику: можно ли её обойти, не закрыта ли она от индексации, не указывает ли она на другой URL и не заменяется ли правильный адрес редиректом или дублем.

×
Дай суперсилу своему сайту!

WordPress

-20% на топовые темы и плагины

Создай сайт своей мечты ⋙