Что такое noindex и как закрыть страницу от индексации

Noindex — указание поисковику не показывать страницу в поиске. Ставится тегом <meta name="robots" content="noindex"> в коде страницы или HTTP-заголовком X-Robots-Tag: noindex — так можно закрыть и файлы, например PDF.

Noindex и robots.txt

Это разные вещи:

• robots.txt запрещает роботу заходить на страницу. Но если на неё ведут ссылки, адрес может остаться в поиске.
• noindex разрешает зайти, но запрещает показывать страницу в поиске.

Если страница закрыта в robots.txt, робот не увидит её noindex. Чтобы убрать страницу из поиска, оставьте её открытой для обхода и отдавайте noindex.

Что обычно закрывают

• корзину, оформление заказа, личный кабинет;
• результаты поиска по сайту;
• служебные страницы: «спасибо за заявку», версии для печати;
• тестовые страницы и черновики.

Частые ошибки

• noindex остался на всём сайте после разработки;
• noindex попал на нужную страницу из-за настройки плагина или CMS;
• noindex вместе с canonical на другую страницу — противоречивые сигналы.

Как проверить

Экспресс-анализ страницы покажет, открыта ли страница для индексации. Аудит найдёт все закрытые страницы сайта — и через тег, и через заголовок.

Частые вопросы

Чем noindex отличается от запрета в robots.txt?

robots.txt запрещает роботу заходить на страницу, а noindex разрешает зайти, но запрещает показывать её в поиске.

Как быстро страница с noindex пропадёт из поиска?

После следующего обхода роботом — обычно от нескольких дней до пары недель. Ускорить можно отправкой на переобход.