Как проверить индексацию сайта в Яндексе: 4 способа

Проверить индексацию сайта в Яндексе стоит раньше, чем позиции. Если страницы нет в индексе, её нет и в выдаче: ни на первом месте, ни на сотом. Новая страница услуги, которую вы запустили неделю назад, может просто ещё не попасть в поиск. А может не попасть туда вообще из-за одной строчки в robots.txt.

Ниже — четыре способа проверить индексацию: от быстрого запроса в поиске до отчётов Вебмастера. Для каждого — что он показывает, где ошибается и когда его использовать. В конце — таблица сравнения и порядок действий, если страницы в индексе нет.

Что значит «страница в индексе»

У страницы в Яндексе есть два разных состояния, и их часто путают:

• робот знает о странице — он нашёл её по ссылке или в sitemap.xml и, возможно, уже скачал;
• страница в поиске — Яндекс решил показывать её в выдаче.

Между этими состояниями — решение поисковика. Робот может скачать страницу и не добавить её в поиск: например, если это дубль другой страницы, если она закрыта метатегом noindex или Яндекс посчитал её малоценной.

Поэтому вопрос «проиндексирован ли сайт» лучше разбить на два: сколько страниц робот обошёл и сколько из них реально участвуют в поиске. Второе число важнее.

Способ 1. Операторы url: и site: в поиске Яндекса

Самый быстрый способ — спросить у самого поиска. У Яндекса есть операторы, которые ограничивают выдачу конкретным адресом или сайтом.

Проверка одной страницы через url:

Введите в строку поиска Яндекса оператор url: и адрес страницы, например: url:avtoservis-primer.ru/uslugi/remont-akpp/. Если страница в индексе, она появится в выдаче со своим заголовком и описанием. Если выдача пустая — скорее всего, страницы в поиске нет.

Несколько нюансов:

• адрес должен совпадать с тем, что лежит в индексе: попробуйте вариант с www и без, со слешем в конце и без;
• звёздочка в конце адреса ищет все страницы раздела: url:avtoservis-primer.ru/uslugi/* покажет, какие услуги Яндекс знает;
• посмотрите на сниппет: если заголовок старый, значит, Яндекс ещё не переобошёл страницу после правок.

Весь сайт через site: и host:

Оператор site: показывает страницы сайта вместе с поддоменами, host: — только конкретного хоста без поддоменов. Например: site:avtoservis-primer.ru. К оператору можно добавить слово: site:avtoservis-primer.ru вариатор — так видно, какие страницы сайта Яндекс находит по теме.

Это удобно для выборочной проверки. Пролистайте первые страницы выдачи и поищите то, чего там быть не должно: служебные адреса, страницы с параметрами, тестовые разделы, старые акции.

Ограничения операторов

• Нет точного числа. Количество найденных страниц Яндекс либо не показывает, либо показывает приблизительно. Считать по нему индекс нельзя.
• Ручная работа. Для 3–5 адресов нормально, для 50 — уже утомительно.
• Капча. Если вводить много запросов с операторами подряд, Яндекс может попросить подтвердить, что вы не робот.
• Нет причины. Поиск покажет, что страницы нет, но не скажет почему.

Кому подходит: чтобы быстро проверить одну-две страницы прямо сейчас, ничего не подключая. Работает и для чужих сайтов.

Способ 2. Яндекс Вебмастер: «Страницы в поиске»

Вебмастер — основной источник правды об индексации. Нужно добавить сайт и подтвердить права, после этого Яндекс показывает, что он знает о сайте и что с ним делает.

Отчёт «Страницы в поиске»

Раздел «Индексирование» → «Страницы в поиске». Здесь видно:

• сколько страниц сайта сейчас в поиске и как это число менялось;
• какие страницы недавно добавлены в поиск, а какие исключены;
• список исключённых страниц с причиной по каждой.

Если число страниц в поиске резко упало, начинайте отсюда. Отфильтруйте исключённые и посмотрите, какая причина встречается чаще всего. Обычно это одна массовая проблема, а не сто разных.

Статусы исключённых страниц

Причина исключения — самое ценное в отчёте. Формулировки в интерфейсе могут немного отличаться, но смысл такой:

Часть исключённых страниц — это нормально. Страницы с параметрами сортировки, старые адреса после редиректа и служебные разделы и не должны быть в поиске. Тревожиться стоит, когда в списке оказываются страницы услуг, категорий и статей.

Проверка статуса URL

Для одной конкретной страницы в разделе «Индексирование» есть инструмент «Проверка статуса URL». Он показывает, обходил ли робот страницу, когда это было, какой код ответа он получил и есть ли страница в поиске.

Если страницу только что поправили, её можно отправить на переобход: «Индексирование» → «Переобход страниц». Число адресов в сутки ограничено, поэтому отправляйте важные страницы, а не весь сайт.

Ограничения Вебмастера

• Задержка. Данные о страницах в поиске обновляются не сразу, а после обновления поисковой базы — с отставанием в несколько дней.
• Только свой сайт. Нужны права на сайт, конкурента так не проверить.

Кому подходит: всем владельцам сайтов. Если Вебмастер ещё не подключён, подключите его до того, как что-то проверять.

Способ 3. Сверка с sitemap.xml

Карта сайта — это список страниц, которые вы хотите видеть в поиске. Если сравнить его с тем, что реально в индексе, разница покажет проблемные места.

Что проверить в Вебмастере

В разделе «Индексирование» → «Файлы Sitemap» добавьте адрес карты, если её там ещё нет. Яндекс покажет статус обработки: прочитан ли файл, сколько в нём адресов и есть ли ошибки — например, неверный формат или недоступный файл.

Ошибка в карте ещё не означает, что сайт не проиндексирован: робот находит страницы и по ссылкам. Но для больших сайтов и новых разделов карта заметно помогает роботу.

Как сверять

1. Выгрузите список адресов из sitemap.xml.
2. Выгрузите из Вебмастера страницы в поиске.
3. Найдите адреса, которые есть в карте, но нет в поиске.
4. Для каждого такого адреса посмотрите статус в списке исключённых.

Часто сверка находит и обратную проблему: в карте лежит мусор. Адреса с редиректом, страницы с noindex, удалённые услуги с ошибкой 404. Робот тратит на них время, а вы получаете ложную картину.

В SerpWatch проверка карты сайта делает эту сверку автоматически: показывает, каких страниц нет в карте, какие адреса в ней битые или закрытые и какие страницы — сироты без внутренних ссылок. Там же можно собрать новый sitemap.xml по результатам обхода сайта.

Кому подходит: сайтам от нескольких десятков страниц, интернет-магазинам, а также после переезда или смены структуры.

Способ 4. Бесплатная проверка списка адресов

Иногда нужен быстрый ответ по конкретному списку. Вы запустили пять новых страниц услуг, переехали на новый домен или заметили, что страница перестала приносить заявки. Вбивать каждый адрес с оператором вручную долго, а Вебмастер показывает данные с задержкой.

Проверка индексации страниц на SerpWatch работает без регистрации. Вставьте до 10 адресов — сервис проверит каждый запросом url: в Яндексе и покажет, есть ли страница в поиске и с каким заголовком.

Чем это удобно:

• текущий поиск — видно, что в выдаче сейчас, а не несколько дней назад;
• сразу список — не нужно проверять адреса по одному;
• любой сайт — права в Вебмастере не нужны, можно проверить и страницы конкурента.

Если страница есть в Вебмастере, а проверка её не нашла, это не обязательно ошибка. Вебмастер обновляется с задержкой, и страница могла выпасть из поиска недавно. Или наоборот: робот её уже скачал, а в поиск она ещё не попала.

Кому подходит: после запуска новых страниц, переезда, правок шаблона — когда нужно проверить конкретные адреса здесь и сейчас.

Как проверить индексацию сайта в Яндексе: сравнение способов

Способы не конкурируют, а дополняют друг друга. Вебмастер объясняет, почему страница исключена. Операторы и проверка списком показывают, что в поиске прямо сейчас. Сверка с картой — что вы упускаете.

Как следить за индексацией постоянно

Разовая проверка отвечает на вопрос «что сейчас». Но проблемы с индексацией редко заметны в момент появления. Программист выкатил новый шаблон с noindex — и через неделю страницы начинают выпадать из поиска. Позиции падают ещё позже, когда искать причину уже сложнее.

Поэтому для рабочего сайта стоит регулярно смотреть на три вещи:

• число страниц в поиске — резкое падение почти всегда означает техническую проблему;
• число исключённых страниц — резкий рост показывает, что появились дубли или ошибки;
• проблемы сайта в Вебмастере — раздел «Диагностика» сообщает о критичных ошибках.

Мониторинг индексации в SerpWatch каждый день забирает из Вебмастера число страниц в поиске и исключённых, ИКС и проблемы сайта и складывает всё в историю. По графику видно, в какой день что-то пошло не так, — а это половина диагностики.

Что делать, если страницы нет в индексе

Короткий порядок действий:

1. Проверьте статус страницы в Вебмастере: если робот её видел, там будет причина.
2. Откройте robots.txt и код страницы: нет ли запрета на индексацию или noindex.
3. Убедитесь, что страница отвечает кодом 200, а canonical указывает на неё саму.
4. Поставьте на страницу ссылки с главной или из раздела и добавьте её в sitemap.xml.
5. Отправьте страницу на переобход в Вебмастере и проверьте снова через несколько дней.

Если проблемных страниц много, удобнее запустить аудит сайта. Он обходит сайт как поисковый робот и находит закрытые, дублирующиеся и битые страницы сразу по всему сайту.

Частые вопросы

Как быстро проверить, есть ли страница в индексе Яндекса?

Введите в поиск Яндекса оператор url: с полным адресом страницы или воспользуйтесь бесплатной проверкой индексации SerpWatch — до 10 адресов без регистрации.

Почему число страниц в индексе меньше, чем на сайте?

Часть страниц может быть закрыта robots.txt или noindex, отвечать ошибкой, быть дублями или ещё не обойдена роботом. Причины видны в Вебмастере, в разделе исключённых страниц.

Как ускорить индексацию новых страниц?

Добавьте их в sitemap.xml, поставьте ссылки с главной и разделов, отправьте на переобход в Вебмастере или подключите IndexNow.

Коротко

• Робот может знать о странице, но не показывать её в поиске, — важно второе.
• Операторы url: и site: быстро показывают, есть ли страница в выдаче, но без причин и точных чисел.
• Вебмастер — главный источник: страницы в поиске, исключённые и причина по каждой, но с задержкой в несколько дней.
• Сверка с sitemap.xml показывает, какие нужные страницы не попали в поиск и какой мусор лежит в карте.
• Для списка адресов подойдёт бесплатная проверка до 10 страниц, для постоянного контроля — ежедневный мониторинг индексации.