Индексация сайта: технический чек-лист

Короткий ответ. Страница может попасть в поиск, если робот может её открыть, ей разрешено индексироваться и у неё есть содержимое, которое он понимает. Ниже — что проверить по порядку.

1. Код ответа

Важные страницы должны отвечать кодом 200. Проверьте также:

• несуществующий адрес возвращает 404, а не 200 и не редирект на главную;
• постоянные переезды оформлены редиректом 301 или 308;
• нет цепочек из нескольких редиректов подряд.

2. Один канонический адрес

Выберите основную HTTPS-версию сайта: с www или без. Альтернативные версии должны перенаправляться на неё, желательно без цепочки редиректов. Для каждой самостоятельной индексируемой страницы укажите <link rel="canonical"> на её итоговый адрес. Для дублей указывают выбранную основную страницу.

3. robots.txt

Если файл /robots.txt используется, он не должен закрывать важные страницы и ресурсы. Добавьте строку Sitemap: с реальным адресом карты сайта. Отсутствие robots.txt само по себе не запрещает индексацию. Файл управляет обходом, а не удаляет страницы из индекса: для исключения используйте noindex, сохранив доступ робота к странице, чтобы он увидел директиву. См. справку Яндекса о robots.txt.

4. sitemap.xml

В sitemap должны быть только канонические индексируемые страницы с кодом 200. Не включайте редиректы, дубли, страницы с noindex и служебные страницы. Отправьте sitemap в Яндекс Вебмастер и Google Search Console. См. справку Яндекса о sitemap.

5. noindex

Проверьте метатег robots и HTTP-заголовок X-Robots-Tag на важных страницах. Типичная ошибка — noindex, оставшийся с этапа разработки.

6. Доступность содержимого

Поисковые системы могут обрабатывать JavaScript, но такой обход сложнее. Надёжнее отдавать основной текст сразу в HTML и делать важные ссылки обычными <a href>. См. как Яндекс видит страницы.

7. Title, Description, H1

У каждой страницы должны быть уникальные Title и Description и один H1 по теме страницы. См. справку Яндекса о Title и Description.

8. Проверка в инструментах

• Яндекс Вебмастер: индексирование, ошибки, sitemap.
• Google Search Console: отчёт об индексировании страниц и проверка URL.

Быстрый тест за 5 минут

1. Откройте /robots.txt и указанный в нём sitemap. Он может называться sitemap.xml или sitemap-index.xml.
2. Откройте любой несуществующий адрес и проверьте код ответа.
3. Просмотрите исходный код главной: есть ли noindex, canonical, Title.
4. Откройте http-версию и версию с www: куда ведёт редирект.

Для полного списка см. чек-лист готовности сайта. Подготовка к ИИ-поиску: что сделать до GEO.

Проверено 20 октября 2026 года.