Сайта или страницы нет в поиске: как найти причину и что исправить

Как выяснить, почему сайт или отдельная страница отсутствуют в поиске: проверить статус URL, robots.txt, noindex, ответ сервера, Sitemap и переобход без обещаний сроков.

Виталий Бурлаков
Основатель и руководитель маркетингового агентства 360i
Виталий Бурлаков — основатель и руководитель маркетингового агентства 360i (Челябинск). В маркетинге с 2011 года, специализация — Авито, Яндекс Директ, SEO и GEO-продвижение для малого и среднего бизнеса.
Опубликовано:
Кратко о главном

Как выяснить, почему сайт или отдельная страница отсутствуют в поиске: проверить статус URL, robots.txt, noindex, ответ сервера, Sitemap и переобход без обещаний сроков.

Если страницу не удаётся найти по запросу, начните с её адреса. Поиск по названию услуги не показывает, включён ли конкретный URL в поисковую базу. Проверьте один и тот же полный URL в Яндекс Вебмастере и Google Search Console, найдите конкретное препятствие и после исправления повторите проверки. Запишите результаты.

Правила и названия инструментов проверены 13 ноября 2026 года.

Сайт отсутствует в поиске или не виден по запросу

Дальше будем использовать условный адрес https://example.ru/usluga/. Возможны три ситуации: поисковая система ещё не обнаружила URL; робот знает его, но страница исключена; страница участвует в поиске, однако не показывается по нужному запросу.

Робот узнаёт адрес из ссылок или Sitemap, посещает страницу, загружает её содержимое. Затем поисковая система решает, включать ли страницу в поиск и где показывать её по запросам. Дата посещения роботом подтверждает обход, а не включение в поиск. Статус «URL есть в индексе Google» тоже не гарантирует показ по каждому запросу (Яндекс, Google).

Что вы обнаружилиСледующий шаг
Не находится весь сайтСверьте адрес ресурса в кабинете и проверьте главную страницу.
Отсутствует нужный URLНайдите его статус и причину исключения.
URL участвует в поиске, но не виден по запросуИзучайте видимость и позиции отдельно от индексации.

Запрос site:example.ru может подсказать, встречается ли домен в результатах. Он не даёт полного списка страниц и не заменяет проверку URL в кабинете. Статус страницы в Яндексе ничего не говорит о её статусе в Google.

Выдача Яндекса по запросу site:360i.digital 13.11.2026: видны страницы сайта.
Проверьте свой домен через site: в Яндексе. Снимок показывает отдельные страницы 360i.digital, а не полный список индекса. Открыть крупно.
Выдача Google по запросу site:360i.digital 13.11.2026: видны другие страницы сайта.
Повторите запрос site: в Google. Здесь видны другие страницы 360i.digital; выдача не заменяет проверку конкретного URL. Открыть крупно.

Где посмотреть статус страницы

Яндекс Вебмастер

Выберите подтверждённый ресурс, к которому относится https://example.ru/usluga/. Если сайта ещё нет в кабинете, добавьте его и подтвердите права. Порядок подключения описан в инструкции 360i.

Откройте «Индексирование» → «Страницы в поиске». В режиме «Все страницы» найдите нужный адрес; затем проверьте «Исключённые страницы». Для поиска можно использовать фильтр по фрагменту URL. Сверяйте протокол, домен и путь: http и https, адреса с www и без него могут вести на разные страницы. Если по данным отчёта проверяемый URL не участвует в поиске Яндекса, это сведения на дату обновления отчёта, а не результат свежей проверки страницы. Если URL есть среди исключённых, запишите причину и дату последнего посещения роботом; если записи нет, проверьте Sitemap и внутренние ссылки по инструкции ниже. Данные Вебмастера могут обновляться с задержкой (справка Яндекса).

Яндекс Вебмастер, «Страницы в поиске»: здесь видны режимы «Все страницы» и «Исключённые страницы», адреса и дата последнего посещения. Причину для нужного URL откройте отдельно.
Яндекс Вебмастер, «Страницы в поиске»: здесь видны режимы «Все страницы» и «Исключённые страницы», адреса и дата последнего посещения. Причину для нужного URL откройте отдельно. Открыть крупно.

Затем откройте «Инструменты» → «Анализ индексации страницы», введите полный URL и нажмите «Проверить». Инструмент проверяет, в частности, запрет обхода в robots.txt и метатег noindex; им можно воспользоваться без добавления своего сайта в Вебмастер. Сообщение о доступности страницы не подтверждает её участие в поиске. Если проверка не удалась, сверьте URL и доступность страницы (справка Яндекса).

Яндекс Вебмастер, «Анализ индексации страницы»: введите адрес страницы и нажмите «Проверить».
Яндекс Вебмастер, «Анализ индексации страницы»: введите адрес страницы и нажмите «Проверить». Открыть крупно.
Яндекс Вебмастер, результат анализа: показ страницы запрещён правилом Disallow для /administrator/. Проверьте правило robots.txt для своего URL.
Яндекс Вебмастер, результат анализа: показ страницы запрещён правилом Disallow для /administrator/. Проверьте правило robots.txt для своего URL. Открыть крупно.

Google Search Console

Выберите ресурс, который включает проверяемый адрес, и введите полный URL в верхнюю строку проверки. Если доступа к ресурсу нет, сначала подтвердите права; подробнее — в инструкции 360i.

Верхняя строка Google Search Console: «Проверка всех URL на ресурсе https://360i.digital/».
Введите в верхнюю строку полный URL своей страницы. Надпись с адресом ресурса сама по себе не сообщает статус страницы. Открыть крупно.

В сохранённых сведениях посмотрите общий статус URL и, если данные доступны, дату последнего сканирования, получение страницы и разрешение на индексирование. В разделе «Индексирование страниц» сравните адрес, указанный сайтом как предпочтительный, с адресом в поле «Каноническая страница, выбранная Google», если он указан. Канонический адрес — основная, по мнению системы, версия среди одинаковых или похожих страниц (справка Google).

Google Search Console, сохранённые сведения URL: страница обнаружена, но не проиндексирована. Для проверки текущей версии нажмите «Проверить страницу на сайте».
Google Search Console, сохранённые сведения URL: страница обнаружена, но не проиндексирована. Для проверки текущей версии нажмите «Проверить страницу на сайте». Открыть крупно.

Статус «Страница обнаружена, не проиндексирована» означает, что Google знает URL, но ещё не просканировал страницу; даты последнего сканирования в отчёте нет. Справка Google допускает перенос сканирования из-за возможной нагрузки, но один этот статус не доказывает перегрузку вашего сайта. Проверьте доступность опубликованной страницы, ссылку на неё внутри сайта и правильность URL в Sitemap (справка Google).

При статусе «Страница просканирована, но пока не проиндексирована» робот уже посетил страницу, однако Google не добавил её в индекс. Это не доказательство санкций или плохого содержания. Для важного URL сопоставьте ответ страницы, запреты, канонический адрес и её отличие от других страниц (справка Google).

После правки нажмите «Проверить страницу на сайте»: инструмент проверит текущую опубликованную версию. Положительный результат показывает возможность её индексирования, но не подтверждает включение URL в поиск. Проверка не определяет окончательный канонический адрес и не проверяет Sitemap или ссылки на страницу; при редиректе отдельно проверьте конечный URL. Позже сравните дату сканирования и статус URL в сохранённых сведениях (справка Google).

Если в поиске нет всего сайта

Если сайт пропал из поиска Яндекса, сначала сверьте адрес ресурса и статусы главной и важных URL в «Страницах в поиске». Для URL, которые перестали участвовать в поиске, прочитайте причины исключения и сопоставьте даты изменения статуса с последними правками robots.txt, noindex, редиректов, canonical, сервера и структуры сайта. Если URL участвуют в поиске, а сайт не виден по привычным запросам, сравните показы и позиции за сопоставимые периоды: отсутствие показа по одному запросу ещё не доказывает падение общей видимости. Затем проверьте конкретное сообщение Вебмастера и свежий ответ нужного URL на экранах ниже. Не делайте вывод о санкциях без сообщения о соответствующем нарушении (справка Яндекса).

Сверьте адрес ресурса и ответ главной страницы

Откройте главную страницу в браузере без входа в аккаунт. Посмотрите, какой адрес остаётся после загрузки, и сравните его с ресурсом в кабинете. Версии с http и https, с www и без него требуют отдельной проверки. Если старый адрес намеренно перенаправляет посетителя кодом 301 или 308, это допустимо: проверяйте конечную страницу.

Браузер показывает, что открылось у вас; робот мог получить другой ответ. В Яндекс Вебмастере сопоставьте «Оптимизация сайта» → «Диагностика сайта», «Индексирование» → «Статистика обхода» и свежую «Проверку ответа сервера». В последнем инструменте введите полный URL, выберите робота Яндекса и нажмите «Проверить». Код 200 означает успешный ответ, 4xx — проблему с адресом или доступом, 5xx — сбой сервера. При 200 посмотрите и содержимое: пустая страница не решает задачу посетителя. Проверка помогает обнаружить также ошибки DNS, соединения и блокировку робота защитой сервера (диагностика Яндекса, проверка ответа сервера).

На 13 ноября 2026 года экран «Диагностика сайта» открывается, но на нём показано предупреждение: «В инструменте “Диагностика сайта” временно недоступна выгрузка отчетов и обновление данных». Не считайте данные этого экрана свежей проверкой; ответ конкретного URL проверьте отдельно в «Проверке ответа сервера».

Яндекс Вебмастер: путь «Оптимизация сайта» → «Диагностика сайта».
1. Откройте «Оптимизация сайта» → «Диагностика сайта» и проверьте сообщения о проблемах сайта. Этот экран не устанавливает статус отдельного URL. Открыть крупно.
Яндекс Вебмастер: путь «Индексирование» → «Статистика обхода».
2. Откройте «Индексирование» → «Статистика обхода» и изучите посещения робота и ошибки. Посещение не подтверждает включение URL в поиск. Открыть крупно.
Яндекс Вебмастер: путь «Инструменты» → «Проверка ответа сервера».
3. Откройте «Инструменты» → «Проверка ответа сервера», введите URL и проверьте ответ для робота. Успешный ответ не доказывает индексацию. Открыть крупно.
Яндекс Вебмастер, «Проверка ответа сервера»: при коде 200 OK содержимое может отсутствовать; здесь указаны 0 Б и Content-Length: 0. Проверьте содержимое ответа нужной страницы.
Яндекс Вебмастер, «Проверка ответа сервера»: при коде 200 OK содержимое может отсутствовать; здесь указаны 0 Б и Content-Length: 0. Проверьте содержимое ответа нужной страницы. Открыть крупно.

Если сервером управляет хостинг или другой специалист, передайте результат в конкретном виде: «Проверьте https://example.ru/: [дата и время] при проверке роботом получен [код или сообщение]. Главная должна открываться без авторизации и отдавать содержимое сайта. Проверьте DNS, правила защиты и ответ для робота; сообщите результат повторной проверки». Для намеренного редиректа добавьте конечный адрес. Старое предупреждение в кабинете само по себе не доказывает, что сбой продолжается. Если проблема связана со временем ответа, пригодится разбор скорости загрузки сайта.

Найдите запрет обхода или индексирования

Откройте https://example.ru/robots.txt. Найдите секцию, применимую к роботу Yandex или Googlebot, и проверьте правило для пути /usluga/. Например, Disallow: / в подходящей секции закрывает обход сайта для этого робота. Не заменяйте весь файл готовым шаблоном: его правила действуют и на другие адреса. Результат для Яндекса дополнительно проверьте в «Анализе индексации страницы», для Google — в сведениях о разрешении сканирования при проверке URL (Яндекс, Google).

robots.txt сайта 360i.digital: User-Agent: *, Allow: /, Disallow: /api/.
Сверьте правило для нужного пути: общая секция разрешает обход сайта и закрывает /api/, а не весь сайт. Это не подтверждает индексацию страниц. Открыть крупно.

robots.txt управляет обходом. Правило noindex запрещает включать загруженное содержимое в индекс. Чтобы проверить HTML, откройте страницу в браузере, выберите в меню страницы «Просмотреть код страницы» (название зависит от браузера) и найдите noindex. Запретом для страницы будет соответствующий метатег в разделе <head>, например <meta name="robots" content="noindex">. Само слово noindex в любом месте кода запрет не доказывает. Для отдельного робота может быть указан его собственный метатег.

Исходный код preview страницы 360i.digital: начало метатега robots; его содержимое перенесено на следующую строку.Продолжение метатега robots на следующей строке исходного кода preview: noindex, nofollow, nocache.
Две соседние вырезки показывают один метатег robots: первая — его начало, вторая — продолжение на следующей строке с noindex, nofollow, nocache. Preview закрыт от индексации намеренно; удалять этот запрет не нужно. Открыть начало крупно; открыть продолжение крупно.

noindex может приходить и в HTTP-заголовке X-Robots-Tag: noindex. Это не часть HTML: заголовки ответа смотрите в «Проверке ответа сервера» Яндекса или попросите специалиста показать ответ для нужного URL. Если запрет добавляет система управления сайтом, проверьте настройки публикации и передайте человеку с доступом адрес страницы и найденный метатег либо заголовок (справка Google о noindex).

Робот должен загрузить страницу, чтобы прочитать noindex. Если обход закрыт в robots.txt, Googlebot не увидит этот запрет; сам URL при определённых условиях всё же может появиться в Google по ссылкам с других сайтов. Для нужной страницы проверяйте разрешение на обход и отсутствие случайного noindex по отдельности (справка Google о robots.txt).

Если отсутствует отдельная страница

Сначала определите, должна ли участвовать в поиске именно https://example.ru/usluga/. Старый адрес с правильным редиректом, удалённая страница и копия основного URL не требуют одинакового исправления. Если адрес должен открывать самостоятельную страницу услуги, двигайтесь от причины в кабинете.

Таблица объединяет типы причин из Яндекс Вебмастера. В Google читайте его собственный статус проверки URL, сведения о получении страницы, разрешении на индексирование и выбранном каноническом адресе. Названия статусов одной системы не переносятся в другую (исключённые страницы Яндекса, проверка URL Google).

Что видноЧто проверить и сделатьКак проверить правку
Ошибка загрузки или обработки, недоступный URLПолучите свежий ответ именно для этого адреса. Проверьте DNS, защиту сервера, 4xx/5xx и содержимое. Если страница должна работать, исправьте сбой или передайте результат хостингу.Робот получает нужную страницу с содержимым; затем сравните дату обхода и причину в отчёте.
Запрет в robots.txtНайдите правило для нужного робота и пути. Уберите ошибочный запрет, сохранив правила для остальных страниц.Повторный анализ не показывает блокировку обхода. Статус в поиске проверяйте отдельно.
Запрет noindexНайдите метатег в <head> или HTTP-заголовок X-Robots-Tag. Уберите запрет с целевой страницы и проверьте опубликованный ответ.Текущая версия больше не отдаёт запрет; после нового обхода сравните статус URL.
Редирект, дубль или неканонический адресОткройте исходный адрес и цель редиректа. Сверьте http/https, www, параметры URL и указанный сайтом канонический адрес. Меняйте настройку, только если она ошибочна.Проверяйте участие нужного конечного или основного URL. Исключение прежней копии допустимо.
Страница загружена, но не включена; в Яндексе она отмечена как малоценная или маловостребованнаяСравните её с другими страницами: решает ли она отдельную задачу, есть ли содержимое и ссылки на неё внутри сайта. Исправьте найденный дубль или недостаток.После нового обхода смотрите решение системы; доступность сама по себе не обещает включения.

Чтобы проверить канонический адрес, откройте исходный код страницы тем же способом, что и для метатега, и найдите в <head> элемент вида <link rel="canonical" href="https://example.ru/usluga/">. Значение href — адрес, который сайт предлагает считать основным. Это сигнал, а не безусловная команда: сопоставьте его с адресом, выбранным Google. Если у условной страницы услуги по ошибке указан адрес другой услуги, исправьте href и затем проверьте выбор системы. При намеренном редиректе проверяйте цель, а не добивайтесь включения старого URL (справка Google о канонических адресах).

Исходный HTML главной 360i.digital: canonical указывает на https://360i.digital.
Найдите canonical главной: сайт указывает https://360i.digital как основной адрес. Выбор Google проверяйте отдельно в Search Console. Открыть крупно.

Пометка о малоценной или маловостребованной странице сама по себе не означает нарушение правил. Если кабинет отдельно сообщает о безопасности или мерах в отношении сайта, откройте это сообщение и разбирайте указанную в нём причину (справка Яндекса).

Проверьте Sitemap и внутренние ссылки

Если URL доступен роботу, но система ещё не обнаружила его, посмотрите, откуда она может узнать адрес. Sitemap — файл со сведениями о страницах сайта. Он помогает обнаружению, но не обязывает поисковую систему включить каждый URL в поиск.

Откройте опубликованный файл Sitemap и найдите в нём https://example.ru/usluga/. Если адрес файла неизвестен, посмотрите настройки сайта или запись Sitemap в robots.txt. Затем в Яндекс Вебмастере откройте «Индексирование» → «Файлы Sitemap», выберите ресурс и проверьте обработку файла. Если файл ещё не добавлен, введите его полный URL и нажмите «Добавить». При ошибке откройте её описание и проверьте доступность файла для робота. Сравните адрес страницы в Sitemap с нужной версией: старый URL, случайный редирект или копия требуют уточнения. Успешная обработка файла не подтверждает участие каждой страницы в поиске (справка Яндекса о Sitemap).

Яндекс Вебмастер, «Файлы Sitemap»: сравните статус и дату последней загрузки каждого файла; предупреждение требует отдельной проверки.
Яндекс Вебмастер, «Файлы Sitemap»: сравните статус и дату последней загрузки каждого файла; предупреждение требует отдельной проверки. Открыть крупно.

Пройдите к странице услуги с главной, из меню или раздела услуг. Если обычной ссылки на нужный URL нет, добавьте её в подходящем месте; если ссылка ведёт на старую копию, исправьте адрес. Роботы Google также находят страницы по ссылкам. Отсутствие URL в Sitemap само по себе не объясняет исключение (справка Google о Sitemap).

Отправьте исправленную страницу на переобход

Сначала проверьте опубликованное изменение: нужный URL открывается, робот может загрузить страницу, прежняя ошибка или запрет больше не видны. Переобход — просьба повторно посетить URL, а не команда включить его в поиск.

В Яндекс Вебмастере откройте «Индексирование» → «Переобход страниц», выберите сайт, введите полный адрес исправленной страницы и нажмите «Отправить». Состояние заявки смотрите в колонке «Статус». «Заявка обработана» означает визит робота, но не включение страницы в поиск; при ошибке вернитесь к проверке ответа сервера. Участие URL проверяйте в «Страницах в поиске» (справка Яндекса о переобходе).

Яндекс Вебмастер, «Переобход страниц»: поле для URL и кнопка «Отправить» находятся над списком прежних заявок со статусами «Заявка обработана» и «Ошибка».
Яндекс Вебмастер, «Переобход страниц»: поле для URL и кнопка «Отправить» находятся над списком прежних заявок со статусами «Заявка обработана» и «Ошибка». Открыть крупно.

В Google Search Console снова введите тот же URL, нажмите «Проверить страницу на сайте» и убедитесь, что препятствие устранено. Затем нажмите «Запросить индексирование». Повторные заявки для неизменённой страницы не устраняют техническую причину и не ускоряют её включение в поиск (справка Google).

Google Search Console: для /services/seo-audit сохранён статус «URL нет в индексе Google»; видны две кнопки проверки и запроса индексирования.
Найдите «Проверить страницу на сайте» и «Запросить индексирование». Снимок показывает расположение кнопок и сохранённый статус, а не результат новой проверки. Открыть крупно.

Если после исправления препятствий нужно отправить несколько URL, можно рассмотреть SpeedyIndex (партнёрская ссылка). По описанию сервиса, в нём создают задания с пакетами URL для Google и Яндекса и получают отчёты о задачах и статусах. Заявленная цель — быстрая индексация, но сервис не устраняет запреты noindex и robots.txt или ошибочный canonical и не гарантирует включение страницы в поиск. Сначала проверьте опубликованную версию каждого адреса и исправьте найденную причину. Затем сверяйте результат для того же URL отдельно в Яндекс Вебмастере и Google Search Console.

Проверьте результат на том же URL

Создайте файл «Проверки индексации URL.xlsx» в Excel или таблицу «Проверки индексации URL» в Google Таблицах. Для каждой проверки URL в каждой поисковой системе добавляйте новую строку, сохраняя прежние записи. Колонки: URL — поисковая система — исходный статус — дата обхода — ответ страницы — причина — правка — дата и результат повторной проверки. Для условного https://example.ru/usluga/ после удаления случайного noindex можно записать: «В опубликованном ответе запрета больше нет; новый обход и статус в поиске ещё не проверены». Это описание проверки правки, а не вымышленный результат индексации.

Вернитесь к тому же URL в том же кабинете. Сравните свежую проверку страницы или ответа сервера с прежней ошибкой, затем — дату посещения роботом и сохранённый статус в поиске. Если робот всё ещё видит запрет, найдите версию страницы, где он остался. Если робот уже посетил URL, но страница исключена, прочитайте новую причину, проверьте канонический адрес и содержимое. Если нужный URL участвует в поиске, вопрос его позиции разбирайте отдельно. Когда изменений в индексировании не видно, сопоставьте дату правки, последнего посещения роботом и обновления отчёта. Повторная проверка текущей страницы сама по себе не означает, что поисковая база уже обновилась (Яндекс, Google).

Частые вопросы

Почему робот посетил страницу, а её нет в поиске?

Посещение означает, что робот обратился к URL; при ошибке он мог не загрузить содержимое. Даже после успешной загрузки система отдельно решает, включать ли страницу в поиск. Сравните дату обхода с датой правки и прочитайте причину исключения: если робот ещё не приходил после правки, отчёт может описывать прежнюю версию.

Почему Google видит страницу, а Яндекс — нет?

У систем разные роботы и отдельные поисковые базы. Проверьте один и тот же полный URL в обоих кабинетах. Доступ для Googlebot не подтверждает доступ для робота Яндекса, и наоборот.

Sitemap принят без ошибок: почему URL отсутствует?

Статус файла говорит о его обработке, а не о судьбе каждого адреса. Найдите нужный URL внутри файла, затем откройте его собственный статус. Если страница ещё не обнаружена, проверьте также ссылки на неё с других страниц сайта.

Нужно ли возвращать в поиск страницу с редиректом или дубль?

Если старый адрес намеренно ведёт кодом 301/308 на новую страницу либо повторяет основной URL, проверяйте конечный или основной адрес. Исправление нужно, когда редирект ведёт не туда или сайт ошибочно указывает другую страницу как каноническую.

Сайт только опубликован: когда искать ошибку?

Сразу проверьте главную и важную страницу без авторизации, доступ для роботов, внутренние ссылки и сведения в кабинетах. Если препятствий нет, а робот ещё не обнаружил адрес, отслеживайте дату обхода и статус. Универсального срока для нового сайта нет.

Почему переобход прошёл, а URL не появился?

Отметка о выполненном обходе подтверждает визит робота. Сравните дату этого визита с датой публикации правки и посмотрите сохранённую причину исключения. Если отчёт ещё описывает старую версию, дождитесь его обновления, не отправляя неизменённый URL повторно.

Когда нужна помощь с технической диагностикой

Если выпали многие страницы, причины связаны между собой или требуется разбирать настройки сервера и загрузку содержимого через JavaScript, можно обратиться за SEO-аудитом в маркетинговое агентство 360i (Челябинск). Подготовьте список URL, их статусы в Яндексе и Google и результаты проверок ответа сервера.

Услуги по теме

Подписывайтесь на наш Telegram-канал

Здесь вы найдёте всё самое полезное для роста вашего бизнеса в интернете: свежие стратегии, рабочие инструменты, новости отрасли и практические советы от руководителя агентства полного цикла.

Подписаться

Хотите получить бесплатную консультацию по продвижению?

Расскажите о своей задаче, и мы предложим вам персональное решение!

+7