Короткий ответ. Страница может попасть в поиск, если робот может её открыть, ей разрешено индексироваться и у неё есть содержимое, которое он понимает. Ниже — что проверить по порядку.
1. Код ответа
Важные страницы должны отвечать кодом 200. Проверьте также:
- несуществующий адрес возвращает 404, а не 200 и не редирект на главную;
- постоянные переезды оформлены редиректом 301 или 308;
- нет цепочек из нескольких редиректов подряд.
2. Один канонический адрес
Выберите один вариант: с www или без, HTTPS. Остальные должны перенаправляться на него одним редиректом. На каждой странице укажите <link rel="canonical"> на её собственный итоговый адрес.
3. robots.txt
Файл /robots.txt должен существовать, не закрывать важные разделы и ресурсы и содержать строку Sitemap: с реальным адресом. Он управляет обходом, а не удаляет страницы из индекса: для исключения страницы используйте noindex. См. справку Яндекса о robots.txt.
4. sitemap.xml
В sitemap должны быть только канонические индексируемые страницы с кодом 200. Не включайте редиректы, дубли, страницы с noindex и служебные страницы. Отправьте sitemap в Яндекс Вебмастер и Google Search Console. См. справку Яндекса о sitemap.
5. noindex
Проверьте мета-тег robots и HTTP-заголовок X-Robots-Tag на важных страницах. Типичная ошибка — noindex, оставшийся с этапа разработки.
6. Доступность содержимого
Основной текст должен быть в HTML, а не появляться только после выполнения скриптов. Важные ссылки должны быть обычными <a href>. См. как Яндекс видит страницы.
7. Title, Description, H1
У каждой страницы должны быть уникальные Title и Description и один H1 по теме страницы. См. справку Яндекса о Title и Description.
8. Проверка в инструментах
- Яндекс Вебмастер: индексирование, ошибки, sitemap.
- Google Search Console: отчёт об индексировании страниц и проверка URL.
Быстрый тест за 5 минут
- Откройте
/robots.txtи/sitemap.xml. - Откройте любой несуществующий адрес и проверьте код ответа.
- Просмотрите исходный код главной: есть ли
noindex,canonical, Title. - Откройте http-версию и версию с www: куда ведёт редирект.
Для полного списка см. чек-лист готовности сайта. Подготовка к ИИ-поиску: что сделать до GEO.
Проверено 20 октября 2026 года.