Запрет индексации сайта

Проверка в методике рейтинга: как мы её проводим и почему найденное — проблема

Услуги автора рейтинга

Александра Богуславская — сайты и интернет-продвижение для автобизнеса

Помогаю автосервисам развивать сайты и получать больше клиентов из интернета: запись на сервис, поиск по марке и услуге, заявки с карт и поиска. Обсудить сайт вашего автосервиса:aboguslavskaya.ruim@aboguslavskaya.ru@aolneva+7 961 156-14-49Партнёрская программа

Как проверяем и почему это важно

Проверяем, не закрыт ли сайт от поиска: Disallow: / в robots.txt для Яндекса и Google или для ИИ-краулеров (GPTBot, ClaudeBot, PerplexityBot), тег meta robots noindex на главной, заголовок X-Robots-Tag.

Такой запрет почти всегда попадает на рабочий сайт по недосмотру: уезжает robots.txt тестового сервера или сайт закрывали на время доработок и забыли открыть. Проблема незаметная и дорогая — сайт открывается, реклама идёт, а Яндекс и Google тем временем выбрасывают страницы из выдачи: органический трафик и заявки падают до нуля, позиции потом восстанавливаются месяцами.

Снимаем запрет и отправляем сайт на переобход в Яндекс.Вебмастере, Bing Webmaster и Google Search Console.

Вес в штрафном балле

Если проверка находит проблему, к штрафному баллу автосервиса прибавляется её вес.

Запрет индексации 2

В рейтинге сейчас

Проблема найдена у 403 участников рейтинга. Смотреть рейтинг по этой проверке →