Noindex и canonical в WordPress: как закрыть страницы-сироты
Noindex и canonical в WordPress: как закрыть страницы-сироты от индексации
Страница-сирота — не обязательно страница без входящих ссылок. Чаще это URL, о котором поиск знает только из sitemap: ни меню, ни перелинковки, ни контекста. Такая страница может годами висеть в индексе, собирать показы по мусорным запросам и размывать вес раздела. Типичная ошибка: на сироту ставят noindex или canonical на главную, и из выдачи выпадает нужный материал, а сирота остаётся. Ниже порядок действий, который подходит для любого сайта на WordPress.
Noindex и canonical решают разные задачи
Смешение директив — самая частая причина, почему «закрытие» не работает.
| Директива | Что делает | Когда уместна | Когда опасна | |—|—|—|—| | noindex (meta robots или X-Robots-Tag) | Просит не включать URL в индекс | Служебные, дублирующие, тонкие страницы; архивы; параметры | Если URL закрыт в robots.txt, робот не увидит директиву; если страница нужна в выдаче | | canonical | Указывает предпочтительный URL среди дублей | Дубли с параметрами, версии страниц, зеркала | Если ведёт на noindex-страницу или на нерелевантный URL, сигнал противоречив и может быть проигнорирован | | 301 | Переносит URL на новый адрес | Страница заменена другой | Если контент уникален и нужен, потеряешь его | | 410 | Сообщает, что страницы больше нет | Удалённый контент без замены | Если ошибся, вернуть URL в индекс придётся через повторный обход |
noindex — про исключение, canonical — про склейку. Для сироты с уникальным содержимым правильный ход — не noindex, а внутренние ссылки. noindex ставь только на то, что действительно не должно быть в поиске.
Откуда в WordPress берутся страницы-сироты
Типовые источники, которые стоит проверить в первую очередь:
- Страницы вложений (attachment pages). WordPress создаёт отдельный URL для каждой медиазаписи. На сайте с большой библиотекой изображений это десятки тонких страниц.
- Архивы авторов и дат. Если авторов несколько или публикации редкие, архивы выглядят как список из одной записи.
- Архивы таксономий с одной записью. Особенно метки: их легко наплодить и трудно убрать.
- Пагинация. Вторая и последующие страницы архивов без ссылок из меню.
- Служебные страницы плагинов. Формы, страницы «спасибо», лендинги конструкторов.
- Записи, опубликованные по ошибке. Их находят по sitemap, а в навигации они не появляются.
В рамках аудита online-computer.ru отдельно стоит сверить список из примерно 44 записей WordPress с текущими метаданными noindex/canonical и разобрать 2 страницы-сироты. Это отправная точка, а не полная картина. Полную картину даёт инвентаризация.
Шаг 1. Инвентаризация: собери список URL
Без списка любые правки — стрельба вслепую. Минимальный набор источников:
- Sitemap. Открой
sitemap_index.xml(Yoast, Rank Math) или/wp-sitemap.xmlи выгрузи все URL. - База WordPress. Если есть WP-CLI:
« wp post list --post_type=page,post --post_status=publish --fields=ID,post_title,post_name,post_type --format=csv ` Для проверки метаданных Yoast: ` wp post meta list <ID> --keys=_yoast_wpseo_meta-robots-noindex,_yoast_wpseo_canonical «
- Google Search Console. Раздел «Индексирование → Страницы»: какие URL в индексе и почему исключены.
- Яндекс Вебмастер. «Индексирование → Страницы в поиске» и «История обхода». Если экспорт «Истории обхода» пустой, это отдельная задача: без него не видно, какие URL робот обходит и какие коды ответа получает.
- Краулер. Screaming Frog или аналог покажет, у каких URL нет входящих внутренних ссылок.
Дальше сверяешь: URL есть в sitemap, но на него нет ни одной внутренней ссылки — это кандидат в сироты.
Шаг 2. Решение по каждой странице
Одного правильного ответа для всех страниц нет. Разложи кандидатов по четырём корзинам:
| Ситуация | Действие | |—|—| | Контент полезен, но забыт | Добавить 2–3 внутренние ссылки из смежных материалов, оставить в индексе | | Дубль или устаревшая версия | 301 на актуальный URL | | Контент удалён без замены | 410 | | Служебная страница, дубль без ценности, параметры | noindex + убрать из sitemap |
Отдельно про вложения: если страницы медиафайлов не нужны, их проще перенаправить на сам файл или на родительскую запись. Это настройка в SEO-плагине, а не ручная правка каждой записи.
Шаг 3. Настройка noindex в WordPress
Проверь глобальную галочку. В «Настройки → Чтение» есть пункт «Попросить поисковые системы не индексировать сайт». На боевом сайте он должен быть снят. SEO-плагины дублируют эту настройку у себя — проверяй оба места, иначе однажды сайт выпадет из выдачи целиком.
Yoast SEO. В настройках типов контента, таксономий и архивов для каждой сущности есть переключатель показа в результатах поиска. Для меток, архивов авторов и дат его обычно выключают. Для вложений включают перенаправление URL вложения на сам файл.
Rank Math. Аналогичные разделы «Titles & Meta» с переключателями Robots Meta.
Точечно. В редакторе записи: блок SEO → «Дополнительно» → noindex. Так закрывают единичные страницы, а не типы.
Для не-HTML. PDF, XML и другие файлы закрываются заголовком X-Robots-Tag, а не мета-тегом. Пример для nginx: « location ~* \.(pdf)$ { add_header X-Robots-Tag "noindex"; } ` Учти: add_header внутри location` отменяет заголовки, заданные уровнем выше. Если там есть заголовки безопасности, продублируй их.
Через код, если плагина нет. Начиная с WordPress 5.7 мета-тег robots формирует ядро, поэтому корректнее использовать фильтр wp_robots, а не выводить второй тег через wp_head: «php add_filter( 'wp_robots', function ( $robots ) { if ( is_attachment() || is_author() ) { $robots['noindex'] = true; $robots['follow'] = true; } return $robots; } ); ` Ставь follow`, если хочешь, чтобы робот ходил по ссылкам со страницы, но не индексировал её.
Критично: noindex работает, только если URL доступен для обхода. Если он закрыт в robots.txt, робот не прочитает директиву и URL может остаться в индексе по внешним ссылкам. Сначала сними запрет в robots.txt, потом ставь noindex.
Убери URL из sitemap. noindex-страница в карте сайта — противоречивый сигнал: ты одновременно просишь «не индексируй» и «вот она, обойди».
Шаг 4. Canonical: как не сломать склейку
Правила, которые закрывают большинство проблем:
- Canonical на обычных страницах — самоссылающийся. Если он ведёт на другой URL, ты сам объявляешь свою страницу дублем.
- Абсолютный адрес, один протокол, без UTM-параметров.
https://online-computer.ru/..., а не относительный путь. - Не ставь canonical с обычной страницы на
noindex-страницу. Получается «эта страница — копия той, которой не должно быть в индексе». - Один canonical на документ. Второй часто добавляют тема или кэш-плагин — проверяй исходный код, а не только настройки SEO-плагина.
- Пагинацию не склеивай с первой страницей. Google не рекомендует canonical со второй страницы архива на первую: так ты сообщаешь, что страницы 2..N не нужны, и ссылки на записи с них могут не учитываться.
Шаг 5. Проверка после изменений
- Исходный код. Открой URL и убедись, что в
<head>ровно одинcanonicalи один корректныйrobots. - Заголовки.
curl -I https://online-computer.ru/<путь>покажет код ответа иX-Robots-Tag, если он задан на уровне сервера. Для 301 проверь, что цепочка заканчивается на 200, а не на очередном редиректе. - Robots.txt. Убедись, что закрываемые через
noindexURL не заблокированы вrobots.txt. - Sitemap. Перегенерируй карту сайта и проверь, что в ней нет
noindex-страниц, редиректов и 410. - Google Search Console. «Проверка URL» покажет, какой canonical выбрал Google и видит ли он
noindex. Отправь обновлённый sitemap. - Яндекс Вебмастер. «Инструменты → Проверка ответа сервера» для выборочных URL, затем «Переобход страниц» для важных. Сроки выпадения из индекса и переобхода — нет данных: зависят от частоты обхода сайта, смотри по «Страницам в поиске».
- Краулер повторно. Прогони сайт ещё раз: у оставленных в индексе бывших сирот должны появиться входящие внутренние ссылки.
Фиксируй каждое изменение в таблице: URL, было, стало, дата. Без журнала через месяц не получится связать изменения в выдаче с конкретной правкой.
Итог
Сироту с полезным контентом не закрывают, а встраивают в структуру внутренними ссылками. noindex — для служебных и тонких страниц, при открытом обходе и без присутствия в sitemap. canonical — только для склейки реальных дублей, самоссылающийся на обычных страницах. 301 и 410 — для заменённого и удалённого контента. Порядок всегда один: инвентаризация, решение по корзинам, правки, проверка.
А какие страницы-сироты нашлись у тебя: вложения, архивы меток или забытые записи?