Страница товара недоступна в Merchant Center: дерево решений для 404, блокировок ботов и цепочек редиректов

«Страница товара недоступна» — одно из самых дорогостоящих сообщений Merchant Center, потому что оно приходит без предупреждения. Google отключает затронутые товары, и они перестают показываться в рекламе и бесплатных листингах, пока его краулер снова не получит доступ к странице (Справка Google Merchant Center). Один неудачный обход мобильной или десктопной страницы отклоняет товар на обоих типах устройств, а после исправления товару может потребоваться до 48 часов, чтобы вернуться (Google, Product crawl issues).

Это руководство предназначено для фид-менеджеров, руководителей агентств и разработчиков, которые находят ошибки посадочных страниц на вкладке «Требуется внимание». Прочитав его, вы сможете отнести сбой к одной из шести причин (фид, robots.txt, правило файрвола или CDN, цепочка редиректов, сервер или сам Google) и исправить его в источнике.

Что на самом деле означает каждое название ошибки посадочной страницы

Google сообщает об одной и той же проблеме — «не удалось загрузить страницу товара» — под несколькими названиями. В таблице каждое из них сопоставлено с кодом в API и с тем, что проверять в первую очередь.

Коды ошибок взяты из таблицы серьёзности ошибок Content API; названия — из справочных страниц Google: страница товара недоступна, не удаётся проверить страницы товаров и доступ StoreBot. Последняя строка относится к уровню аккаунта, а не отдельного товара.

Сначала посчитайте, сколько товаров затронуто

Прежде чем открывать какие-либо URL, выясните, какая доля каталога затронута. Это соотношение подскажет, где искать причину.

• Почти все товары: Google блокирует что-то общее для всего сайта (robots.txt, правило CDN или файрвола, DNS, сбой). Начните с веток B, C и E.
• Чёткое подмножество (одна категория, бренд или шаблон URL): фид формирует некорректные URL. Начните с веток A и D.
• Небольшая разрозненная доля без закономерности, при этом страницы открываются нормально: возможно, обход Google просто не удался. Эммануэль Флосси (Emmanuel Flossie) из FeedArmy считает признаком причины на стороне Google примерно 10% затронутых товаров, а признаком проблемы сайта — все товары (PPC Land, март 2026). Это наблюдение одного практика, а не ориентир от Google, поэтому используйте его как стартовую гипотезу, а не как приговор.

Выгрузите затронутые товары в CSV на вкладке «Требуется внимание» (Google) и отсортируйте их по пути URL — закономерность обычно видна сразу.

Дерево решений: шесть причин в том порядке, в котором их стоит проверять

Прогоните один из затронутых URL через инструмент проверки URL, выбрав в качестве типа загрузки смартфон или десктоп в соответствии с ошибкой — именно такой тест рекомендует сам Google (Google). Затем идите по первой подходящей ветке.

A. URL в фиде неверен (404 или недопустимый URL)

Если проверка возвращает 404, сравните URL из фида с актуальным. Обычные причины: изменившийся slug, домен тестовой среды, отсутствующий языковой префикс или неэкранированные символы. Google требует, чтобы URL начинались с http:// или https://, использовали ваш подтверждённый домен и содержали закодированные специальные символы; в качестве примера приводится запятая, которая превращается в %2C (Google). Атрибут link должен соответствовать кодировке по RFC 2396 или RFC 1738 (Google, Product data specification).

Это особенно касается турецких и арабских магазинов, платформы которых формируют slug из названий товаров. Примеры строк, составленные специально для этого руководства:

Кодируйте с помощью правила фида, а не вручную, и кодируйте один раз. Двойное кодирование превращает %C4 в %25C4 — и вы получаете новую ошибку 404. Несколько товаров можно исправить через «Изменить товар»; если товаров много, исправьте link и mobile_link в источнике и загрузите фид заново (Google).

B. robots.txt блокирует Google или недоступен

Если проверка сообщает, что страница заблокирована, откройте /robots.txt. Решение Google — разрешить и краулеру посадочных страниц, и краулеру изображений загружать весь сайт (Google):

User-agent: Googlebot
Disallow:

User-agent: Googlebot-image
Disallow:

Есть три детали, на которых часто спотыкаются:

• AdsBot игнорирует подстановочную группу. AdsBot-Google и AdsBot-Google-Mobile игнорируют группу User-agent: *, поэтому правила для них нужно указывать явно (Google, special-case crawlers). Google использует AdsBot-Google для рекламы и Googlebot для органической выдачи, и блокировка любого из них может вызвать проблемы (Google).
• У Storebot-Google свой токен. Его правила влияют на все поверхности Google Shopping (Google, common crawlers), поэтому Disallow: /, добавленный ради экономии краулингового бюджета, закрывает Storebot доступ ко всем страницам товаров.
• Недоступный robots.txt — тоже сбой. Ошибка «Can't access your robots.txt file» («Не удаётся получить доступ к файлу robots.txt») — отдельная причина ошибки «Страница товара недоступна» (Google).

Если вы недавно меняли robots.txt, Google может продолжать показывать затронутые товары до 30 дней, используя ранее одобренные изображения (Google). Этот льготный период скрывает проблему, но не решает её.

C. Защита от ботов, файрвол или геоблокировка возвращает 403 только Google

Эта ветка сбивает с толку, потому что в браузере страница открывается нормально. Сам Google называет эту схему: файрволы или CDN вроде Cloudflare, которые возвращают 403 или 404 только автоматическим ботам, чёрные списки user-agent и фреймворки фингерпринтинга, определяющие краулеры по user agent, IP, переменным браузера или частоте обхода (Google, StoreBot access).

1. Проверьте лог файрвола или CDN на заблокированные или отправленные на проверку запросы Googlebot, AdsBot-Google или Storebot-Google.
2. Проверяйте через обратный DNS, а не по статичному списку IP. Google не рекомендует статичные списки разрешённых IP и советует использовать обратный DNS (Google). Googlebot разрешается в googlebot.com, AdsBot — в google.com, а диапазоны адресов Google публикует в файлах common-crawlers.json и special-crawlers.json (Google, verifying requests).
3. Узнайте, что ваш инструмент защиты от ботов может и не может исключить. В документации Cloudflare сказано, что Bot Fight Mode нельзя обойти или пропустить с помощью пользовательских правил WAF или Page Rules, тогда как Super Bot Fight Mode поддерживает правила Skip (документация Cloudflare). Если Google получает проверку в Bot Fight Mode, решение — изменить конфигурацию или тарифный план, а не добавлять ещё одно правило.
4. Проверьте геоблокировку. Инструкция Google: разрешить user agent AdsBot-Google и, если вы ограничиваете регионы, разрешить сканирование из США (Google). С этим сталкиваются магазины, которые ограничивают трафик Турцией или странами Персидского залива.

Не проверяйте это, отправляя curl с user agent Googlebot со своего компьютера. Инструмент защиты от ботов, проверяющий IP, заблокирует такой запрос как поддельный, даже если настоящему Googlebot доступ разрешён. Используйте проверку URL — она выполняет загрузку из сети Google.

D. Слишком много редиректов или неработающая цель редиректа

Google просит делать не более двух редиректов (Google). Типичная цепочка из трёх переходов: http:// на https://, голый домен на www, старый slug на новый. Передавайте конечный URL. Редиректы, возвращающие недопустимый, пустой или слишком длинный URL, — это отдельный сбой (Google). Если вы используете дополнение для региональной доступности и цен, URL с параметром region_id также должны быть доступны для сканирования (Google).

E. Ответы 5xx, таймауты или сбои DNS

Они указывают на сервер, а не на фид; Google перечисляет 5xx, неразрешимые имена хостов, некорректные ответы и таймауты как отдельные причины (Google). Его рекомендация для пикового сезона: если сайт недоступен или отвечает с таймаутом, товары могут быть отклонены, поэтому убедитесь, что сервер выдержит всплеск трафика, и проверьте скорость в PageSpeed Insights (Google, preparing for big events). Делайте это до пика Black Friday или Рамадана, а не во время него.

F. С вашей стороны всё в порядке

Если проверка URL возвращает 200, robots.txt разрешает Google, лог файрвола чист, а затронуто лишь разрозненное меньшинство товаров, запросите проверку сайта. Это ускорит повторное одобрение; Google может затратить до 12 часов и не принимает повторный запрос в этот период (Google). Проблема может вернуться, иногда уже на следующий день (PPC Land); в этом случае обратитесь в поддержку Merchant Center, приложив результаты проверки.

Сколько длится восстановление после исправления

Для разных этапов Google называет разные сроки. Используйте эту таблицу, чтобы согласовать ожидания с владельцем бюджета:

Чек-лист профилактики, который можно оценить баллами

Ставьте по одному баллу за каждый пункт, который вы можете подтвердить сегодня. Семь и больше: ошибки должны быть редкими и быстро диагностироваться. Четыре и меньше: следующее изменение robots.txt или CDN, скорее всего, отключит товары.

1. Фид экспортирует итоговый канонический URL товара, а не URL, который перенаправляет больше одного раза.
2. Правило фида ровно один раз кодирует не-ASCII символы и запятые в процентной кодировке.
3. Тестовые, предпросмотровые и прочие вспомогательные домены не могут попасть в рабочий фид.
4. robots.txt разрешает Googlebot и Googlebot-Image доступ к путям товаров и изображений.
5. Никто не добавлял запрет для Storebot-Google или AdsBot-Google без причины, которую кто-то может объяснить.
6. Защита от ботов исключает проверенные краулеры Google через обратный DNS, и ваш инструмент защиты действительно поддерживает исключения.
7. Географические ограничения разрешают сканирование из США.
8. Каждое изменение robots.txt, CDN или WAF проверяется на трёх URL товаров с помощью проверки URL.
9. Кто-то проверяет вкладку «Требуется внимание» еженедельно, а в пиковый сезон — ежедневно.
10. Товары, которых нет в наличии или которые удалены, исчезают из фида до того, как их URL начнут возвращать 404.

Пункты с 1 по 3 и 10 относятся к фиду, где их может обеспечить инструмент для работы с фидом. Feed Protection от Feedance запускает проверки при каждом обновлении фида и исключает товары с неработающими ссылками на изображения до того, как они попадут в канал. Наша интеграция с Google Merchant Center передаёт значения link, которые формируют ваши правила. Вторая сторона той же проблемы — изображения — разобрана в нашем руководстве по исправлению ссылок на изображения товаров.

Где это руководство перестаёт помогать

Инструменты для работы с фидами, включая наш, не сканируют ваш сайт так, как это делает Googlebot. Feed Protection проверяет данные фида при каждом обновлении, не является мониторингом в реальном времени и не загружает посадочные страницы из сети Google. Ветки B, C и E остаются за вашим разработчиком, хостингом или администратором CDN, а правильные инструменты здесь — проверка URL и логи сервера или CDN; ни одна фид-платформа их не заменит.

Это руководство охватывает только Google; Meta и TikTok Shop используют собственные краулеры и названия ошибок. Страницы самого Google расходятся по срокам, поэтому воспринимайте таблицу восстановления как диапазон. А правило «10% означает проблему на стороне Google» принадлежит одному практику, и у нас нет собственных данных, чтобы его подтвердить.

Часто задаваемые вопросы

Означает ли «Страница товара недоступна», что мой сайт не работает?

Не обязательно. Это значит, что краулер Google не смог загрузить переданный URL; причиной может быть неверный URL в фиде, блокировка в robots.txt, блокировка файрволом только для ботов, слишком много редиректов или сбой на стороне Google.

Почему мои товары отклонены на десктопе, если не загрузилась только мобильная страница?

Google сообщает, что ошибка обхода мобильной или десктопной посадочной страницы отклоняет товар на обоих типах устройств, пока страница не станет доступна. Исправьте неработающую версию — и вернутся обе.

Достаточно ли разрешить Googlebot в robots.txt для рекламы в Shopping?

Не всегда. AdsBot-Google игнорирует группу User-agent: *, а у Storebot-Google есть собственный токен для поверхностей Shopping. Убедитесь, что ни одно правило не запрещает доступ ни одному из них.

Нужно ли добавлять IP-адреса Google в список разрешённых в файрволе?

Google не рекомендует статичные списки разрешённых IP и советует проверку через обратный DNS. Если вам нужны диапазоны, берите их из опубликованных Google файлов JSON, а не из списка, скопированного один раз.

Через сколько вернутся отклонённые товары после исправления?

Запрошенная проверка сайта занимает до 12 часов; затем, по данным страниц Google, на обновление товаров и вкладки «Требуется внимание» уходит до 48–72 часов. Закладывайте от двух до трёх дней.

Могут ли турецкие или арабские символы в URL товаров вызывать отклонения?

Могут, если они попадают в Google без кодирования или с двойным кодированием. Кодируйте не-ASCII символы и запятые ровно один раз с помощью правила фида.

Может ли проблема с посадочной страницей привести к приостановке всего аккаунта?

Да. У Google есть критическая ошибка уровня аккаунта для неработающих посадочных страниц, которая приводит к приостановке аккаунта, поэтому всплеск таких ошибок по всему каталогу требует внимания в тот же день.

Проверьте ссылки в фиде раньше, чем это сделает Google

Причины на стороне фида, описанные в этом руководстве (неверные домены, неэкранированные символы, URL, которых вообще не должно быть в фиде), дешевле выявить в фиде, чем в Merchant Center. Прогоните фид через бесплатный инструмент аудита товарного фида, который оценивает полноту данных, качество данных и техническое состояние, и проработайте всё, о чём он сообщит, до следующего пика.

Источники

• Справка Google Merchant Center: How to fix: Product page unavailable
• Справка Google Merchant Center: Product crawl issues
• Справка Google Merchant Center: How to fix: Unable to check product pages
• Справка Google Merchant Center: How to fix: Unable to do quality & policy checks on product pages
• Справка Google Merchant Center: How to fix: Google StoreBot crawler can't access your in-store product page
• Справка Google Merchant Center: How to prepare for big events and product launches
• Справка Google Merchant Center: Product data specification
• Google Content API for Shopping: Issue severity and Merchant Center Diagnostics
• Google Search Central: List of Google's special-case crawlers
• Google: List of Google's common crawlers
• Google: Verifying Google crawlers and fetchers
• Документация Cloudflare: Bot Fight Mode
• PPC Land: Google Merchant Center's "product page unavailable" error kills ads (March 2026)