Экспертиза

Терминология индексации: Submitted, Crawled, Indexed, Stable

Терминология индексации: Submitted, Crawled, Indexed, Stable
Содержание

В разговорах об индексаторах постоянно путают четыре разных события. Из-за этого «80% индексации» в одном источнике и «80% индексации» в другом могут означать совершенно разные вещи. Эта статья — короткий справочник по терминам, чтобы любые цифры читались однозначно.

Воронка индексации

Submitted → Accepted → Crawled → Indexed → Stable Indexed → Ranking

Каждый этап отделён от следующего. Урон на любом из них означает, что вся цепочка не доходит до пользы.

Submitted

URL отправлен. Через sitemap.xml, через IndexNow API, через ручную отправку в Search Console, через сторонний сервис.

Что значит: ваш сайт или сервис передал URL поисковику или промежуточному API.

Что не значит: URL не обязательно дойдёт до бота. Не обязательно бот зайдёт. Не обязательно проиндексируется.

Где видно: в логах вашего скрипта отправки, в логах сервиса, в Submitted URLs отчёта Search Console.

Accepted (200 OK от API)

API сервиса или поисковика принял запрос с URL. Обычно ответ HTTP 200 или 202.

Что значит: запрос валидный, синтаксически корректный, авторизованный.

Что не значит: реальной обработки могло не быть. IndexNow прямо в документации пишет, что 200 — это «получено», не «индексировано».

Где видно: в HTTP-ответе на API-вызов.

Между Submitted и Accepted можно потерять URL по причинам: неправильный формат, ошибка ключа, превышение квоты, неверный host в запросе.

Crawled

Поисковый бот действительно зашёл на страницу. Прочитал HTML, увидел title, meta, canonical, контент.

Что значит: бот тратил ресурсы на ваш URL. Это уже значимое событие.

Что не значит: страница попадёт в индекс. После Crawled поисковик принимает решение «индексировать или нет» на основе качества контента, дублей, истории сайта.

Где видно:

  • В Google Search Console: URL Inspection покажет «Last crawl» и дату.
  • В Яндекс.Вебмастере: «Индексирование → Страницы в поиске» с распределением по статусам.
  • В серверных логах по user-agent Googlebot/Yandex/Bing.

Между Accepted и Crawled теряется самая большая часть URL. Поисковик может получить уведомление и не отреагировать или отреагировать с большой задержкой.

Indexed

Страница появилась в индексе поисковика и доступна в выдаче.

Что значит: в момент проверки поисковик показывает эту страницу по запросам, релевантным её содержанию.

Что не значит: страница останется в индексе надолго. Может выпасть через сутки.

Где видно:

  • Через site: запрос в выдаче. Самый простой способ.
  • В Search Console URL Inspection — статус «URL is on Google».
  • В Яндекс.Вебмастере — «В поиске».

Между Crawled и Indexed теряется то, что поисковик сочёл недостаточно полезным. Это статус Crawled, currently not indexed в Google.

Stable Indexed

Страница остаётся в индексе через 14–30 дней после первого попадания.

Что значит: вы можете рассчитывать на эту страницу как на источник органического трафика.

Что не значит: страница ранжируется хорошо. Stable indexed — это лишь «существует в выдаче», не «показывается на нужных запросах в топе».

Как проверять: повторные site: запросы или URL Inspection через 7, 14, 30 дней.

Между Indexed и Stable Indexed теряются страницы, которые попали в индекс «на черновую» и поисковик потом передумал. Часто бывает с тонким контентом, дублями, страницами после миграций.

Ranking

Страница не просто в индексе, а реально показывается пользователям по запросам и приводит трафик.

Что значит: все технические и качественные сигналы сошлись.

Что не значит: позиция стабильна. Ranking меняется со временем под действием апдейтов алгоритмов.

Где видно:

  • Search Console: «Эффективность» с показами и кликами.
  • Яндекс.Вебмастер: «Поисковые запросы».
  • Системы аналитики и rank-трекеры.

Между Stable Indexed и Ranking — целая отдельная история. Это уже не про индексацию, а про SEO в целом.

Что делает сервис индексации

Услуги сервисов индексации обычно работают на этапах Submitted → Accepted → Crawled, иногда с попыткой влиять на Indexed.

  • Хорошие сервисы прямо пишут «приведём Googlebot к URL», то есть гарантируют этап Crawled.
  • Часть сервисов гарантирует возврат токенов, если URL не достиг этапа Indexed (но не Stable Indexed).
  • На Stable Indexed и тем более Ranking сервис индексации никак не влияет.

Поэтому когда сервис говорит «80% индексации», нужно уточнить:

  • 80% от Submitted (мало значит);
  • 80% от Crawled (это уже про реальный визит бота);
  • 80% от Indexed (хорошо, но непонятно когда выпадет);
  • 80% от Stable Indexed (это лучший результат).

Большинство публичных рекламных цифр — где-то между Crawled и Indexed на коротком интервале (1-3 дня). Реальные цифры на Stable Indexed обычно ниже.

Шаблон отчёта по тесту

Если вы тестируете сервис, используйте это разделение в отчёте:

Из 100 URL:
  Submitted: 100 (все отправлены)
  Accepted: 100 (API принял все)
  Crawled через 3 дня: 78
  Indexed через 3 дня: 52
  Indexed через 14 дней: 47
  Stable Indexed (через 30 дней): 41

Эта раскладка отделяет работу сервиса (Submitted → Crawled) от работы поисковика (Crawled → Indexed → Stable). Без такого разделения невозможно понять, что именно нужно чинить — сервис, контент или сайт.

Связанные термины

  • Soft 404 — страница отдаёт 200 OK, но содержимое пустое. Останется в Crawled, не попадёт в Indexed.
  • Crawled, currently not indexed — статус Search Console между Crawled и Indexed.
  • Discovered, currently not indexed — статус между Submitted и Crawled.
  • Index decay — выпадение из индекса со временем; противоположность Stable Indexed.