Если в индекс попадают страницы поиска, вложений, 404 или результаты фильтров, это почти всегда лишний шум для блога. Такие URL не дают полезного контента, размывают качество индекса и иногда создают дубли. При этом закрывать нужно не весь сайт, а только служебные страницы, чтобы не задеть записи, рубрики и нормальные архивы блога.
Ниже — практический разбор, какие страницы WordPress обычно стоит убрать из индексации, чем отличаются способы закрытия и как проверить, что всё настроено правильно.
Какие служебные страницы WordPress обычно не должны попадать в поиск
Для блога чаще всего речь идёт о четырёх типах URL:
- страницы внутреннего поиска — результаты по запросу вида
?s=...; - страницы вложений — отдельные страницы медиафайлов, если они не несут самостоятельной ценности;
- страницы 404 — сами по себе они не индексируются как обычные страницы, но важно не создавать лишние варианты таких URL и не плодить мусорные ссылки;
- результаты фильтров и сортировок — URL с параметрами, которые меняют выдачу, но не добавляют уникального контента.
Логика простая: если страница не отвечает на отдельный пользовательский запрос и не содержит полезного текста, её обычно не стоит продвигать в поиск. Для блога это особенно важно, потому что поисковик должен тратить обход и индексирование на записи, рубрики и полезные архивы, а не на технические страницы.
Что именно закрывать, а что не трогать
Ошибка, которую я вижу чаще всего: владельцы блога начинают закрывать слишком много страниц, а потом удивляются, что из поиска пропали нужные разделы. Поэтому сначала разделим типы URL.
Обычно закрывают
- страницы результатов поиска по сайту;
- страницы вложений, если у медиа нет отдельной пользы для посетителя;
- страницы с параметрами фильтров, сортировки и пагинации, если они создают дубли или почти дубли;
- технические страницы, которые не являются контентом блога.
Обычно не закрывают
- записи блога;
- рубрики и метки, если вы реально используете их как навигацию и они дают уникальную подборку материалов;
- главную страницу;
- страницы авторов, если они наполнены и полезны;
- обычные архивы, если они нужны читателю и не дублируют контент.
Если сомневаетесь по рубрикам или меткам, не закрывайте их автоматически. Для блога это часто важные точки входа. Проблема обычно не в самих архивах, а в технических дублях и пустых страницах.
Как закрыть от индексации поиск WordPress
Страницы поиска в WordPress обычно выглядят как https://site.ru/?s=запрос. У них нет самостоятельной ценности для поиска: содержимое зависит от запроса пользователя, а сами URL могут бесконечно множиться.
Самый надёжный вариант — отдавать таким страницам мета-тег noindex. Это не запрещает поисковому роботу зайти на страницу, но говорит не включать её в индекс.
Если вы используете SEO-плагин, проверьте, умеет ли он закрывать страницы поиска и архивы с параметрами. В популярных SEO-плагинах для WordPress это обычно делается в настройках индексации архивов или через отдельные правила для поисковых страниц. Названия пунктов могут отличаться в зависимости от версии плагина.
Если SEO-плагина нет, можно добавить правило в тему или дочернюю тему. Для поиска в WordPress часто используют фильтр wp_robots, который позволяет добавить noindex на нужных типах страниц:
add_filter( 'wp_robots', function( $robots ) {
if ( is_search() ) {
$robots['noindex'] = true;
$robots['nofollow'] = true;
}
return $robots;
} );Этот вариант рабочий, если вы понимаете, куда именно добавляете код. Лучше использовать дочернюю тему или небольшой функциональный плагин, а не править файлы основной темы: при обновлении изменения пропадут.
После настройки откройте любую страницу поиска и проверьте исходный код: в <head> должен появиться noindex. Если у вас включён SEO-плагин, не дублируйте правила вручную, чтобы не получить конфликтующие директивы.
Как поступить со страницами вложений
Страницы вложений в WordPress — это отдельные страницы, которые открываются для изображения, PDF или другого медиафайла. Для блога они часто бесполезны: на странице может быть только картинка и заголовок файла, без нормального текста и контекста.
Если вы не используете такие страницы как полноценные публикации, их лучше закрыть от индексации или перенаправить на сам файл либо на запись, где изображение используется. Для большинства блогов более практичен именно редирект вложений на родительскую запись или сам файл, если это поддерживает ваша схема публикации.
В SEO-плагинах часто есть отдельная настройка для вложений: либо noindex, либо автоматический редирект. Для блога обычно удобнее редирект, если вложения не нужны как отдельные страницы. Но если у вас есть смысловые страницы медиа, например галереи с описанием, закрывать их автоматически не стоит.
Проверка простая: откройте URL вложения и посмотрите, куда он ведёт и что отдаёт в <head>. Если это пустая страница без пользы, она не должна индексироваться как отдельный документ.
Результаты фильтров и сортировок: как не создать дублей
На блогах фильтры встречаются не только в интернет-магазинах. Они появляются в каталогах статей, подборках по тегам, архивах по темам, а иногда и в виджетах поиска по автору, дате или рубрике. Если фильтр меняет только порядок или набор материалов без нового контента, поисковику такой URL обычно не нужен.
Типичная проблема выглядит так: одна и та же подборка доступна по нескольким адресам с параметрами в строке запроса. Например, сортировка, фильтр по метке или по дате создают десятки почти одинаковых страниц. Это уже не просто технический хвост, а реальный риск размывания индекса.
Что делать на практике:
- если фильтр не нужен в поиске, ставьте для него
noindex; - если фильтр создаёт дубль основной страницы, подумайте о каноническом URL через
rel="canonical"; - если параметр вообще не нужен пользователю и не должен индексироваться, лучше не генерировать такие URL массово;
- если фильтры используются только для удобства навигации внутри сайта, не делайте их отдельными посадочными страницами.
Для блога особенно важно не путать полезные страницы-архивы и технические фильтры. Например, рубрика с подборкой статей — это нормальная страница. А та же рубрика, но с параметрами сортировки по популярности или дате, уже может быть дублем.
Что выбрать: noindex, robots.txt или редирект
Для служебных страниц WordPress эти способы решают разные задачи. Коротко:
| Способ | Когда подходит | Что важно знать |
|---|---|---|
noindex | Для поиска, фильтров, вложений и других страниц, которые должны открываться, но не индексироваться | Страница остаётся доступной для обхода, но не должна попадать в индекс |
robots.txt | Когда нужно ограничить обход, а не только индексирование | Не лучший способ для удаления уже проиндексированных URL; поисковик может не увидеть запрет на самой странице |
| Редирект 301 | Когда страница не нужна пользователю и у неё есть понятная замена | Подходит для вложений и явных дублей, но не для всех служебных страниц |
Если задача — убрать из поиска служебные страницы блога, чаще всего правильная связка такая: noindex для поиска и фильтров, редирект для ненужных вложений, а robots.txt использовать только как дополнительный инструмент, а не как основное решение.
Важно понимать ограничение: если страница уже в индексе, один только robots.txt не гарантирует её исчезновение. Для удаления из поиска поисковику нужно увидеть либо noindex на самой странице, либо редирект, либо другой явный сигнал.
Как проверить, что служебные страницы действительно закрыты
После настройки не полагайтесь на предположение «должно работать». Проверьте несколько конкретных URL:
- откройте страницу поиска и посмотрите исходный код;
- проверьте страницу вложения;
- откройте URL с фильтром или параметром сортировки;
- убедитесь, что у нужных страниц есть
noindexили редирект; - посмотрите, не изменились ли важные страницы блога — записи, рубрики, главная.
Если используете Google Search Console или Яндекс Вебмастер, ищите в отчётах именно эти технические URL. Иногда они ещё какое-то время остаются в отчётах после исправления — это нормально. Главное, чтобы новые служебные страницы не продолжали массово попадать в индекс.
Ещё один практический тест: откройте страницу в режиме инкогнито и проверьте, не выглядит ли она как полноценная посадочная. Если на ней нет уникального содержания, а в поиске она всё равно появляется, значит, настройка индексации ещё не доведена до конца.
Чего лучше не делать
Есть несколько типичных ошибок, которые потом сложно разгребать:
- закрывать весь сайт через
robots.txtвместо точечной настройки; - ставить
noindexна рубрики и метки без анализа, а потом терять полезные страницы блога; - оставлять страницы вложений открытыми, если они пустые и не несут смысла;
- создавать десятки фильтров, которые генерируют почти одинаковые URL;
- дублировать правила в SEO-плагине и в теме одновременно.
Если у вас уже есть хаос из технических URL, лучше исправлять его поэтапно: сначала закрыть поиск и вложения, затем разобрать фильтры, потом проверить архивы. Так проще отследить, что именно дало эффект и не сломало нормальную навигацию по блогу.
Для владельца WordPress-блога правильная цель не в том, чтобы «закрыть всё лишнее», а в том, чтобы поисковик видел только полезные страницы: записи, рубрики и действительно ценные архивы. Всё, что работает как техническая прослойка, должно оставаться за пределами индекса или получать понятную замену в виде редиректа.