Страницы нет в поиске. Четыре разные причины, которые выглядят одинаково
Клиент пишет: «Страницы нет в поиске, сделайте что-нибудь». Дальше начинается перебор: переписать текст, добавить ссылок, отправить на переобход, поменять заголовок. Иногда помогает, и тогда кажется, что помог именно последний шаг. Это и есть ритуал — действие, у которого нет проверяемой связи с результатом.
Лекция даёт другую опору: конвейер поисковой системы разобран по этапам, и на каждом видно, что именно там теряется. После неё вопрос «почему страницы нет» превращается в вопрос «на каком этапе она остановилась» — а у него уже есть адрес в интерфейсе и проверяемый ответ.
Систем две, и правила у них расходятся
Специалист в России работает сразу с двумя системами. По оценке StatCounter за август 2026 года доли выглядят так.
| Система | Доля |
|---|---|
| Яндекс | 70,35% |
| 27,79% | |
| Bing | 0,77% |
| Mail.ru | 0,77% |
| DuckDuckGo | 0,22% |
| Yahoo! | 0,05% |
StatCounter считает переходы на сайтах со своим счётчиком — это оценка, а не перепись. Открытие Яндекс Браузера засчитывается Яндексу. Цифру берите как порядок величины, а не как точный замер рынка.
Практический вывод от этого не зависит: игнорировать нельзя ни одну из двух систем, а правила у них расходятся в деталях, которые стоят страниц в индексе.
Что внутри
Пятнадцать тем идут по пути одной страницы: от момента, когда система впервые узнала её адрес, до момента, когда она заняла место в выдаче. На каждом этапе — что система делает, чем это подтверждается в её собственной документации и где в интерфейсе видно, что этап не пройден.
- Чек-листа настройки: как писать файлы управления обходом и как чинить дубли — это практика технической оптимизации, отдельная тема
- Работы с запросами и структурой сайта — отдельная лекция
- Оценки качества сайта и репутации — отдельная лекция
- Текстов, заголовков, ссылок, сниппетов и отчётности — отдельные лекции профессии
Здесь только механизм. Он меняется медленнее интерфейсов и живёт дольше любого чек-листа.
Три этапа Google против четырёх этапов Яндекса
Обе системы описывают свою работу публично, и описания не совпадают по числу этапов. Google называет три, Яндекс — четыре. Это не разница в подробности изложения: у Яндекса есть отдельный этап, на котором обработанная страница может не попасть в поиск.
- Crawling — скачивание текста, изображений и видео программами-краулерами
- Indexing — анализ и сохранение в индексе
- Serving search results — выдача релевантного ответа
Дословно в документации: «Google Search works in three stages, and not all pages make it through each stage».
- Обход сайта
- Загрузка и обработка данных (индексирование)
- Формирование базы страниц, которые могут участвовать в поиске
- Формирование результатов поиска
Третий пункт — тот, которого нет в модели Google.
Лишний этап — это не формальность
Страница обойдена. Загружена. Обработана. И всё равно не попала в базу тех страниц, которые могут участвовать в поиске. Справка Яндекса описывает это прямо.
«Возможна ситуация, когда страница содержит оригинальный, структурированный текст, но алгоритм не добавляет ее в базу, так как вероятность ее попадания в зону видимости на поиске очень низкая. Например, из-за невостребованности пользователями или высокой конкуренции в данной теме».
У Google та же мысль есть, но спрятана не в описании работы поиска, а в документации по бюджету обхода: «For Google Search, not every page that is crawled will necessarily be indexed. After crawling, each page must be evaluated, consolidated, and assessed to determine its suitability for the index».
То есть отбор есть у обеих систем. Разница в том, что Яндекс вынес его отдельным этапом и показывает результат в Вебмастере, а Google оставил внутри индексирования и показывает его статусами отчёта. Для диагностики это важнее, чем кажется: у Яндекса вы видите отдельную причину, у Google — статус, который ещё нужно правильно прочитать.
Дальше нужен аккаунт
Прогресс и монеты сохранятся.