Можно ли скрыть от Google то, что видит пользователь — Блог — Святослав Семёнов
RSS
4 ноября 2026

Можно ли скрыть от Google то, что видит пользователь

Search Engine Journal пишет, что John Mueller от имени Google подтвердил, что можно блокировать индексацию возрастной верификации через robots.txt, даже если она видна пользователям.

Вопрос о том, можно ли скрыть от Google то, что видит пользователь, звучит как парадокс. Но ответ — да, в определённых случаях. Google не требует, чтобы бот видел всё, что видит человек, если это не влияет на основной контент. Особенно если речь о сервисах, которые не несут смысловой нагрузки для поискового ранжирования. Управление тем, что видит Googlebot, — часть архитектуры сайта. И это важно.

Как работает блокировка ресурсов, которые не должны быть в индексе

Когда сайт загружает что-то извне — например, верификацию возраста через API — Googlebot пытается загрузить этот ресурс, если он встроен в страницу. Но если на внешнем домене в robots.txt прописано disallow, бот не будет его загружать. То же самое — если блокировать конкретный JS-файл, отвечающий за показ окна. Google не требует, чтобы бот видел всё, что отображается. Главное — чтобы основная страница работала без сбоев, когда ресурс недоступен. И это возможно.

Раньше было иначе — Google требовал видеть всё

Раньше, в эпоху «сухого» SEO, блокировали JS и CSS, чтобы сэкономить бюджет. Но когда Google начал рендерить страницы, это перестало работать. Сайты, которые блокировали критичные ресурсы, теряли позиции. Теперь ситуация изменилась: Google допускает, что часть интерфейса — например, модальное окно — может быть скрыта от бота, если она не влияет на содержание.

Кто должен это знать — и как понять, что это про вас

Если вы используете внешние сервисы — верификацию, чат, рекламу, аналитику — и они подключаются через API или iframe, то этот случай про вас. Особенно если эти элементы не несут смысловой нагрузки, но мешают индексации. Если вы замечаете, что страницы не индексируются, хотя контент есть — возможно, бот пытается загрузить ресурс, который не отвечает, и это ломает рендер. Тогда блокировка через robots.txt — не избыточность, а часть архитектуры. Проверьте, что ресурсы, которые не влияют на контент, не мешают поисковику.

Что делать — порядок действий в общем виде

Сначала определите, какие внешние ресурсы загружаются на страницу и влияют на рендер. Затем проверьте, можно ли их блокировать без нарушения функциональности. Если ресурс на другом домене — убедитесь, что его robots.txt разрешает или запрещает доступ. Если вы контролируете JS-файл — добавьте его в disallow. Потом протестируйте, как страница отображается без этих ресурсов. И наконец, убедитесь, что основной контент остаётся доступным.

Что мы с этим делаем — управление интеграциями

Мы в Cetera работаем с 2002 года, более 1000 проектов. Когда мы настраиваем внешние сервисы, мы учитываем, какие ресурсы могут мешать индексации. Блокировка через robots.txt — один из инструментов, но не единственный. Мы проверяем, как поведёт себя сайт при отсутствии ресурса, и обеспечиваем, чтобы основной контент всегда был доступен. Это часть архитектуры, а не временная мера. Если хотите понять, как это выглядит у вас, — давайте обсудим вашу задачу.

Это часть нашей работы — Продвижение сайтов. Комплексное SEO-продвижение сайтов всех типов в поиске Яндекс и Google. ✔ Заказать раскрутку в поисковых системах, контексте, социальных сетях и на маркетплейсах. Продвижение сайтов

Можно ли скрыть от Google то, что видит пользователь

Автор: Святослав Семенов из Cetera Labs

← Все материалы