Диагностика индексации в Search Console: шаблон
«Не проиндексировано» - это симптом, а не диагноз. В отчете Google «Индексирование страниц» больше десятка причин, и исправление одной может усугубить другую. Запросите индексирование страницы, которая на деле дубликат, и ничего не произойдет. Снимите блокировку в robots.txt раньше, чем уберете noindex, и в поиске может оказаться не та страница. Этот шаблон заставляет сначала записать факты: точный статус, который показывает Google, что говорят robots.txt и meta robots, какой canonical вы указали и какой выбрал Google. Затем у каждой строки появляется одно исправление и один ответственный. Не каждая страница должна быть в индексе, и шаблон помогает отделить такие страницы от тех, что действительно стоят вам трафика.
- Формат
- Редактируемый Word .docx
- Объем
- 9 вариантов - ~9 страниц
- Цена
- 100% бесплатно
- Начало
- Копировать или скачать
Получите редактируемый Word-документ в один клик.
★★★★★4.9·Бесплатно · Без регистрации · Мгновенная загрузка
Диагностика индексации в Search Console: шаблон
Сначала докажите, что страница действительно исключена
Прежде чем что-то менять, убедитесь, что URL правда отсутствует в индексе Google. Если страница находится по собственному заголовку, она уже проиндексирована.
- Проверка URL (URL Inspection) в Search Console: вставьте [Полный URL] в строку проверки и прочитайте вердикт вверху. "URL есть в Google" (URL is on Google) означает, что страница в индексе; "URL нет в Google" (URL is not on Google) - что ее там нет.
- Запрос site:: выполните поиск по [site:example.com/path]. Пустая выдача - серьезный сигнал, но доверяйте Проверке URL больше, чем [site:]: этот оператор может отставать.
- Контекст покрытия: откройте отчет «Индексирование страниц» и найдите, под какую причину исключения попадает этот URL.
Запишите точную формулировку причины от Google. Исправление для "Просканирована, но пока не проиндексирована" (Crawled - currently not indexed) совсем не такое, как для "Заблокировано в файле robots.txt" (URL blocked by robots.txt), поэтому точный статус, записанный сейчас, избавит от лишней работы потом.
Проверенный URL: [URL] Статус в отчете: [Статус]
Почему это работает
Find the real reason a page isn't indexed and hand the fix to the right person, instead of resubmitting and hoping.
- Logs Google's exact status with robots, meta robots and both canonicals, so the evidence comes before the fix.
- Maps each status to a first check and a usual owner, so the work reaches the right team.
- Asks whether each page should be indexed at all, so you stop chasing pages that are correctly excluded.
9 готовых вариантов
Копировать всеПодтвердите проблему
Когда использовать: Вы считаете, что страница должна быть в индексе, но не уверены, что ее там действительно нет.
Сначала докажите, что страница действительно исключена
Прежде чем что-то менять, убедитесь, что URL правда отсутствует в индексе Google. Если страница находится по собственному заголовку, она уже проиндексирована.
- Проверка URL (URL Inspection) в Search Console: вставьте [Полный URL] в строку проверки и прочитайте вердикт вверху. "URL есть в Google" (URL is on Google) означает, что страница в индексе; "URL нет в Google" (URL is not on Google) - что ее там нет.
- Запрос site:: выполните поиск по [site:example.com/path]. Пустая выдача - серьезный сигнал, но доверяйте Проверке URL больше, чем [site:]: этот оператор может отставать.
- Контекст покрытия: откройте отчет «Индексирование страниц» и найдите, под какую причину исключения попадает этот URL.
Запишите точную формулировку причины от Google. Исправление для "Просканирована, но пока не проиндексирована" (Crawled - currently not indexed) совсем не такое, как для "Заблокировано в файле robots.txt" (URL blocked by robots.txt), поэтому точный статус, записанный сейчас, избавит от лишней работы потом.
Проверенный URL: [URL] Статус в отчете: [Статус]
Просканирована или обнаружена, но не проиндексирована
Когда использовать: Google знает ваш URL, но решил (пока) его не индексировать.
Два разных сигнала, две разные реакции
Эти статусы обычно говорят о ценности страницы или о краулинговом бюджете, а не о технической блокировке. Так что не жмите раз за разом "Запросить индексирование" (Request indexing).
- Просканирована, но пока не проиндексирована (Crawled - currently not indexed): Google загрузил страницу, но решил, что индексировать ее не стоит. Чаще всего это сигнал о качестве или ценности: тонкий, дублирующийся или невостребованный контент.
- Обнаружена, но не проиндексирована (Discovered - currently not indexed): Google нашел URL (часто через sitemap), но еще не сканировал его. Нередко это следствие ограничений краулингового бюджета или медленного большого сайта.
Для статуса «Просканирована, но не проиндексирована» усильте страницу: углубите контент, добавьте внутренние ссылки с релевантных проиндексированных страниц и убедитесь, что она отвечает понятному интенту. Для статуса «Обнаружена, но не проиндексирована» сократите напрасное сканирование: ускорьте ответы сервера, уберите малоценные URL и улучшите перелинковку, чтобы важные страницы были доступны за меньшее число кликов.
Статус: [Статус] Вероятная причина: [Качество / Краулинговый бюджет]
Заблокировано в robots.txt или помечено noindex
Когда использовать: Директива прямо не пускает страницу в индекс.
Ищите блокировки, которые вы поставили сами
Это самые легко исправимые причины: страницу исключает явное правило, которым вы управляете. Проверка URL (URL Inspection) прямо назовет директиву.
- Заблокировано в файле robots.txt (URL blocked by robots.txt): Google запрещено сканирование. Откройте robots.txt и найдите правило, которое совпадает с [путь URL]. Помните: блокировка в robots запрещает сканирование, но не всегда индексирование. Зато она мешает Google увидеть ваш контент.
- Помечено тегом ‘noindex’ (URL marked 'noindex'): страница отдает meta robots [noindex] или заголовок X-Robots-Tag. Запустите проверку на сайте в Проверке URL, чтобы убедиться, что директива есть прямо сейчас.
Удалите или исправьте проблемное правило, затем проверкой на сайте подтвердите, что Google может сканировать страницу и что noindex больше нет. Следите за порядком исправлений: если robots.txt блокирует страницу, Google не видит и ее тег noindex. Чтобы убрать страницу из поиска, разрешите сканирование и оставьте noindex, пока она не выпадет из индекса. Когда все чисто, переходите к запросу индексирования.
Найденная директива: [robots.txt / noindex]
Проблемы с canonical и дубликатами
Когда использовать: Google проиндексировал не тот URL, который вы отправили.
Когда Google сам выбирает канонический URL
Если у страницы статус "Дубликат: канонический URL, выбранный Google, отличается от указанного пользователем" (Duplicate, Google chose different canonical than user) или "Альтернативная страница с правильным тегом canonical" (Alternate page with proper canonical tag), контент, скорее всего, в индексе, просто под другим URL.
- Сравните канонические URL: в Проверке URL (URL Inspection) сопоставьте "Канонический URL, указанный пользователем" (User-declared canonical) и "Канонический URL, выбранный Google" (Google-selected canonical). Расхождение и есть суть проблемы.
- Найдите выбранную страницу: отметьте, какой URL предпочел Google, и решите, устраивает вас это или нет.
Если выбор Google вас устраивает, ничего делать не нужно: контент в индексе. Если хотите, чтобы победил проверяемый URL, давайте согласованные сигналы: canonical на саму себя, внутренние ссылки на предпочтительный URL, совпадающие записи в sitemap и действительно отличающийся контент, чтобы страницы не считались дубликатами. Противоречивые сигналы - обычная причина, по которой Google игнорирует ваш выбор.
Указанный canonical: [URL] Выбран Google: [URL]
Качество и тонкий контент
Когда использовать: Страница доступна для сканирования и уникальна, но все равно не в индексе.
Заслужите индекс, а не просто запросите его
Когда нет ни технической блокировки, ни конфликта canonical, статус "Просканирована, но пока не проиндексирована" (Crawled - currently not indexed) почти всегда означает, что, по мнению Google, страница дает недостаточно ценности. Считайте это проблемой контента, а не багом.
- Оцените уникальность: дает ли страница то, чего нет у проиндексированных конкурентов и у других ваших страниц?
- Проверьте глубину и интент: тонкие, шаблонные или автогенерированные страницы часто остаются вне индекса.
- Оцените внутренний вес: страницы-сироты без внутренних ссылок выглядят малоприоритетными.
Улучшите страницу по существу (оригинальные детали, понятная цель, удобная структура), затем поставьте на нее ссылки с близких по теме проиндексированных страниц, чтобы передать сигналы релевантности и обнаружения. Смиритесь с тем, что некоторые страницы, например почти пустые архивы тегов или дублирующиеся страницы пагинации, просто не заслуживают индексации. Объединение или удаление таких страниц может поднять те, что заслуживают.
Чего не хватает странице: [Заметки]
Запрос индексирования и проверка исправлений
Когда использовать: Вы устранили первопричину и хотите, чтобы Google проверил страницу заново.
Правильно замкните цикл
Когда основная проблема решена, попросите Google пересканировать страницу и убедитесь, что исправление сработало. Делайте это только после устранения настоящей причины: запрос индексирования для неисправленной страницы потрачен впустую.
- Запустите проверку на сайте: в Проверке URL (URL Inspection) нажмите "Проверить страницу на сайте" (Test live URL) и убедитесь, что страница теперь доступна для сканирования, индексируется и не содержит noindex.
- Запросите индексирование: нажмите "Запросить индексирование" (Request indexing) для одного исправленного URL. Не отправляйте одну и ту же страницу снова и снова: быстрее не будет.
- Проверьте массово: в отчете «Индексирование страниц» откройте нужную причину и нажмите "Проверить исправление" (Validate fix), чтобы Google перепроверил все URL этой группы.
По словам Google, проверка обычно занимает до двух недель, иногда дольше; следите за статусом, пока не появится "Пройдено" (Passed). Для исправлений на весь сайт опирайтесь на «Проверить исправление», а не проверяйте URL по одному.
Что исправлено: [Описание] Статус проверки: [Статус]
Шаблон диагностики (для заполнения)
Когда использовать: Одна строка на URL или шаблон URL: точный статус, robots, meta robots, canonical, sitemap, внутренние ссылки, доказательства, исправление, ответственный и дата проверки.
Шаблон диагностики индексации
Заполняйте столбцы с доказательствами раньше столбца с исправлением. Если в строке есть исправление, но нет доказательств, это догадка.
Столбцы
- URL или шаблон и тип страницы [товар, категория, статья]
- Статус в Search Console: [точный ярлык, например Crawled - currently not indexed]
- robots.txt: [разрешено / заблокировано правилом]
- Meta robots / X-Robots-Tag: [index / noindex и где задано]
- Указанный canonical и canonical, выбранный Google [из Проверки URL]
- В sitemap: [да / нет] · Входящие внутренние ссылки: [число, по данным краулинга]
- Доказательства: [дата проверки, проверка на сайте или проиндексированная версия, файл скриншота]
- Должна ли страница быть в индексе? [да / нет и почему]
- Исправление, ответственный, дата проверки [одно изменение, одно имя, одна дата]
| URL | Статус в GSC | robots.txt | Meta robots | Canonical (указанный / Google) | Вх. ссылки | В индекс? | Исправление | Ответственный | Проверено |
|---|---|---|---|---|---|---|---|---|---|
| [url] | [статус] | [robots] | [meta] | [canonical] | [ссылки] | [да нет] | [исправление] | [ответственный] | [дата] |
| [url] | [статус] | [robots] | [meta] | [canonical] | [ссылки] | [да нет] | [исправление] | [ответственный] | [дата] |
| [url] | [статус] | [robots] | [meta] | [canonical] | [ссылки] | [да нет] | [исправление] | [ответственный] | [дата] |
Правила для доказательств
- Проверка на сайте или проиндексированная версия: проверка на сайте показывает страницу сейчас. Проиндексированная версия показывает, что Google увидел при последнем сканировании, с датой. Записывайте, чем вы пользовались.
- Проверка на сайте проверяет не все. Google уточняет, что она не тестирует условия дублирования и canonical, поэтому успешная проверка на сайте не снимает проблему с canonical.
- Списки примеров ограничены 1000 строк. На больших сайтах диагностируйте по шаблонам (одна строка на шаблон), а не гоняйтесь за каждым URL.
Статус и причина: справочник
Когда использовать: Сопоставьте каждый статус Search Console с его обычным значением, первой проверкой и тем, кто обычно отвечает за исправление.
Справочник: статус и причина
Ярлыки в том виде, в каком они показаны в отчете Search Console «Индексирование страниц», проверено в октябре 2026 года. Используйте справочник, чтобы выбрать первую проверку, а не чтобы пропустить сбор доказательств.
| Статус | Обычно означает | Первая проверка | Обычно отвечает |
|---|---|---|---|
| Просканирована, но пока не проиндексирована (Crawled - currently not indexed) | Google загрузил страницу и пока решил ее не индексировать | Уникальность, глубина, внутренние ссылки | Контент |
| Обнаружена, но не проиндексирована (Discovered - currently not indexed) | URL известен, но еще не сканировался | Внутренние ссылки, напрасное сканирование, скорость сервера | SEO + разработка |
| Заблокировано в файле robots.txt (URL blocked by robots.txt) | Срабатывает правило Disallow | Совпадающее правило в robots.txt | Разработка |
| Помечено тегом ‘noindex’ (URL marked 'noindex') | Meta robots или X-Robots-Tag содержит noindex | Шаблон, настройка CMS, HTTP-заголовок | Разработка / CMS |
| Альтернативная страница с правильным тегом canonical (Alternate page with proper canonical tag) | Все работает как задумано: указывает на другой URL | Правильный ли целевой canonical? | Обычно никто |
| Дубликат: пользователь не указал канонический URL (Duplicate without user-selected canonical) | Google видит дубликаты, а вы canonical не указали | Добавить canonical, сократить дубликаты | SEO + разработка |
| Дубликат: канонический URL, выбранный Google, отличается от указанного пользователем (Duplicate, Google chose different canonical than user) | Ваш canonical расходится с другими сигналами | Внутренние ссылки, sitemap, редиректы, контент | SEO |
| Страница с переадресацией (Page with redirect) | URL перенаправляет; значение имеет целевая страница | Sitemap и внутренние ссылки, где остался старый URL | Разработка |
| Ошибка переадресации (Redirect error) | Цепочка, петля, слишком длинный или пустой редирект | Отследить каждый переход | Разработка |
| Ложная ошибка 404 (Soft 404) | Отдает 200, но выглядит пустой или отсутствующей | Тонкий шаблон, нет в наличии, пустой поиск | Контент / разработка |
| Не найдено (404) (Not found (404)) | URL больше не существует | Нужен ли редирект? Кто еще ссылается? | SEO |
| Ошибка сервера (5xx) (Server error (5xx)) | Сервер дал сбой, когда пришел Google | Логи сервера на момент сканирования | Разработка / хостинг |
| Заблокировано из-за неавторизованного запроса (401) / доступ запрещен (403) (Blocked due to unauthorized request (401) / access forbidden (403)) | Логин, файрвол или защита от ботов | Правила WAF или CDN для Googlebot | Разработка / хостинг |
Разобранный пример (вымышленный сайт рецептов)
Когда использовать: Четыре заполненные строки с выдуманного сайта, включая страницу, которой место вне индекса, и исправление, которое потребовало другого ответственного.
Разобранный пример: сайт рецептов
Только пример. Компания, люди, URL и цифры выдуманы, чтобы показать, как выглядит рабочая заполненная версия.
| URL / шаблон | Статус в GSC | Доказательства | В индекс? | Исправление | Ответственный |
|---|---|---|---|---|---|
| /recipes/*-printable | Дубликат: пользователь не указал канонический URL (Duplicate without user-selected canonical) | Проверено 6 окт.; тот же контент, что в основном рецепте | Нет | Canonical на URL основного рецепта | Разработка |
| /recipes/lentil-dal | Просканирована, но пока не проиндексирована (Crawled - currently not indexed) | Проверка на сайте пройдена; 0 внутренних ссылок; 140 слов | Да | Добавить заметки о приготовлении и ссылки с 3 похожих рецептов | Контент |
| /collections/autumn | Помечено тегом ‘noindex’ (URL marked 'noindex') | Заголовок X-Robots-Tag ставит плагин кэширования | Да | Удалить правило заголовка для /collections/ | Хостинг |
| /search?q=* | Заблокировано в файле robots.txt (URL blocked by robots.txt) | Правило: Disallow: /search | Нет | Не нужно. Работает как задумано |
Что изменили доказательства
Команда думала, что noindex на /collections/ ставит CMS. Но в исходном коде страницы тега meta robots не было вообще. Это был HTTP-заголовок от плагина кэширования, поэтому исправление было задачей хостинга, а не контента. Строка 4 исправлений не требовала: страницы внутреннего поиска должны оставаться вне индекса.
Следующий шаг
С помощью Get Source Code of Webpage посмотрите, какие meta robots и canonical страница отдает на самом деле, а Redirect Checker используйте для строк со статусами «Страница с переадресацией» (Page with redirect) и «Ошибка переадресации» (Redirect error). Запустите аудит сайта, чтобы найти проблемы с noindex и canonical во всех шаблонах. Если для исправлений нужна техническая команда, наши услуги SEO и GEO включают внедрение.
Как использовать этот шаблон
- Откройте отчет «Индексирование страниц» в Search Console и отсортируйте причины по числу затронутых URL. Начните с причин, которые касаются страниц, нужных вам в индексе.
- Для каждой причины добавьте в шаблон строку на URL или на шаблон страниц, указав точный ярлык статуса от Google.
- Проверьте URL из выборки. Запишите вердикт, указанный canonical и canonical, выбранный Google, а также чем вы пользовались: проверкой на сайте или проиндексированной версией.
- Проверьте robots.txt, а также meta robots и заголовок X-Robots-Tag страницы. Загрузите исходный код, чтобы увидеть, что реально отдается.
- Решите, должна ли каждая страница вообще быть в индексе. Страницам фильтров, сортировок, версий для печати и внутреннего поиска там обычно не место.
- По справочнику «Статус и причина» выберите первую проверку, затем запишите одно исправление и одного ответственного на строку.
- Устраните причину в источнике, снова запустите проверку на сайте и при необходимости один раз запросите индексирование важного URL.
- Откройте причину в отчете «Индексирование страниц» и нажмите «Проверить исправление» (Validate fix). По словам Google, это обычно занимает до двух недель. Запишите дату результата.
Советы
- Записывайте доказательства до исправления. Больше всего лишней работы с индексацией уходит на исправление причины, которую кто-то просто предположил.
- На больших сайтах диагностируйте по шаблонам. Одна строка на тип страницы - это быстрее и помогает найти общую причину.
- Повторные запросы индексирования не помогают. Устраните причину, отправьте запрос один раз, затем проверьте всю группу.
- Статус «Просканирована, но пока не проиндексирована» (Crawled - currently not indexed) - это вопрос ценности. Лучший контент и внутренние ссылки обычно помогают больше технических правок.
Частые вопросы
Что на самом деле значит «Просканирована, но пока не проиндексирована» (Crawled - currently not indexed)?
Google загрузил страницу, но решил ее не индексировать, по крайней мере пока. Обычно это оценка ценности или дублирования, а не техническая ошибка. Поэтому сначала улучшите глубину, уникальность и внутренние ссылки, а уже потом меняйте настройки.
Чем отличается «Обнаружена, но не проиндексирована» (Discovered - currently not indexed)?
«Обнаружена» значит, что Google знает о существовании URL, часто из вашего sitemap, но еще не сканировал его. Нередко это признак нехватки краулингового бюджета на больших или медленных сайтах. Ускорьте сайт, уберите малоценные URL и усильте внутренние ссылки на важные страницы.
Должна ли каждая страница моего сайта быть в индексе?
Нет. Многие URL, например листинги с фильтрами или сортировкой, почти пустые страницы тегов и дублирующиеся страницы пагинации, вполне обоснованно остаются вне индекса. Добивайтесь индексации действительно ценных страниц, а не 100-процентного покрытия.
Почему Google выбрал другой канонический URL, а не тот, что указал я?
Когда сигналы противоречат друг другу, Google может выбрать свой canonical и показать статус «Дубликат: канонический URL, выбранный Google, отличается от указанного пользователем» (Duplicate, Google chose different canonical than user). Согласуйте тег canonical, внутренние ссылки, записи в sitemap и контент, чтобы все они указывали на один предпочтительный URL и поддерживали его.
Гарантирует ли запрос индексирования, что страница попадет в индекс?
Нет. «Запросить индексирование» (Request indexing) лишь просит Google пересканировать страницу раньше. Решение о качестве или блокировку запрос не отменяет. Если настоящая причина не устранена, страница останется исключенной, поэтому сначала решите основную проблему, а потом отправляйте запрос.
Сколько длится «Проверить исправление» (Validate fix)?
В справке Google сказано, что проверка обычно занимает до двух недель, иногда дольше. Когда она пройдет или завершится неудачей, вы получите письмо. При неудаче исправьте указанный URL и запустите проверку заново.