Связаться с директором
Время работы:
Ежедневно
с 10 до 19
с 10 до 19
При переезде сайта на новый домен Google Search Console может выдавать ошибки “Проверка не пройдена” или “Не удалось загрузить страницу” даже если сайт открывается, редирект работает, а браузер перекидывает пользователя на новый домен. На этой странице вы узнаете подробнее о природе ошибок, а также найдете инструкцию по их устранению.
Начало статьи будет идеальным местом для того, чтобы предложить вам подписаться на мой ТГ канал. Там много авторского контента про SEO и актуальные технологии, а главное — честно, без купюр и манипуляций мнением. Ссылка вот — https://t.me/seomikhaylov
Сообщение “Проверка не пройдена” в Google Search Console означает, что Google не смог подтвердить выполнение условия, которое вы пытаетесь проверить. Это может относиться к разным разделам Search Console:
В контексте переезда сайта чаще всего проблема возникает тогда, когда Google не может нормально получить доступ к старому URL, увидеть редирект и подтвердить, что сайт действительно переехал.
Проблема чаще всего появляется, когда владелец сайта закрыл старый домен для обхода, потому что не хочет, чтобы Google продолжал видеть старый сайт, но тем самым не дает Googlebot увидеть и сам редирект. Пример ошибки:
Формулировка “Не удалось загрузить страницу” означает, что Googlebot или инструмент проверки Search Console не смог получить страницу в ожидаемом виде.
Причины могут быть разные:
Если страница открывается у вас в браузере, это еще не значит, что она доступна для Googlebot. Браузер, краулер, Googlebot и инструмент проверки Search Console могут получать разные ответы сервера.
Стандартная процедура при переезде сайта с одного домена на другой:
На практике ошибка часто возникает из-за того, что старый сайт закрывают без учета особенностей Google.
Редиректы помогают сообщить пользователям и Google Search, что страница получила новый адрес. Но редирект должен быть доступен для обхода. Если вы сначала запрещаете Googlebot заходить на старые URL, а потом ждете, что он увидит 301 редирект, получается противоречие.
Файл robots.txt – служебный файл, который лежит в корне сайта и сообщает поисковым роботам, какие URL можно или нельзя обходить. Но robots.txt не предназначен для скрытия страниц из поиска. Google прямо предупреждает, что robots.txt нужен для управления обходом, а не для надежного исключения страниц из результатов поиска.
Для закрытия от индексации нужны другие методы – noindex, авторизация, удаление URL и другие. Для корректного переезда и закрытия старого домена от индексации, необходимо:
Для Apache это можно сделать через .htaccess. Например, для домена mihaylov.digital:
RewriteEngine On
RewriteCond %{REQUEST_URI} !^/robots.txt$
RewriteCond %{REQUEST_URI} (.*)
RewriteRule ^(.*)$ https://mihaylov.digital/ [L,R=301]
Помимо редиректов URL, важно содержание файла robots.txt на старом домене. Это зависит от задачи:
Если нужно, чтобы Googlebot мог видеть редиректы со старых URL, не стоит закрывать весь сайт директивой:
User-agent: *
Disallow: /
Такая директива запрещает обход всего сайта. А если Googlebot не может обойти URL, он может не увидеть 301 редирект.
Для переезда безопаснее временно оставить максимально простой robots.txt:
User-agent: *
Disallow:
Такой файл фактически разрешает обход всех URL. Google в примерах полезных правил robots.txt указывает, что пустая директива Disallow разрешает обход всего сайта и по смыслу равна отсутствию robots.txt или правилу Allow: /.
В некоторых случаях можно вернуть 404 для robots.txt, и Google будет считать, что ограничений на обход нет. Но лучше использовать полноценный файл – так проще диагностировать проблему, понятнее для команды и меньше сюрпризов при проверках.
Чтобы не получить ошибку “Проверка не пройдена”, лучше сначала подготовить новый сайт – проверьте, что он открывается, индексируется, не закрыт от Google, имеет корректные canonical, sitemap и robots.txt. И лишь затем настраивать редиректы со старого домена, после этого необходимо убедиться, что старый домен не блокирует Googlebot.
Ошибка “Не удалось загрузить страницу” в Google Search Console может появиться не только из-за robots.txt. Ниже – самые частые причины, которые стоит проверить.
| Причина | Что происходит | Как исправить |
| Файл robots.txt блокирует Googlebot | Google не может обойти старые URL и увидеть редирект | Временно открыть обход или убрать блокировку нужных URL |
| Редиректится /robots.txt | Search Console не может корректно получить служебный файл | Исключить /robots.txt из общего редиректа |
| Цепочка редиректов | URL проходит через несколько переходов | Сократить до одного 301 редиректа |
| Циклический редирект | Страница редиректит сама на себя или по кругу | Исправить правила на сервере |
| Ошибка SSL | Google не может установить безопасное соединение | Проверить сертификат |
| Блокировка по User-Agent | Обычный браузер видит сайт, Googlebot — нет | Убрать блокировку Googlebot |
| Ошибка DNS | Домен нестабильно резолвится | Проверить DNS-записи и распространение |
| Сервер возвращает 403/500 | Google получает ошибку доступа или сервера | Проверить логи, фаервол, WAF и хостинг |
| Старый домен не подтвержден | Search Console не видит прав на ресурс | Добавить и подтвердить оба домена |
| Неверный тип свойства | Добавлен не тот протокол или поддомен | Использовать доменное свойство или добавить все варианты |
Чаще всего проблема оказывается не в самой Search Console, а в том, что сервер для Google отвечает иначе, чем для человека.
Google Search Console выдает ошибку “Не удалось загрузить страницу” потому что сайт может открываться для вас, но не для Googlebot. Сервер может по-разному отвечать обычному браузеру и поисковому роботу. Также проблема может быть в robots.txt, firewall, SSL, DNS, редиректах или блокировке по User-Agent.
Лучше не закрывать старый сайт сразу после настройки редиректа. Чтобы Google обработал переезд, он должен иметь возможность обойти старые URL и увидеть редиректы. Если закрыть старые URL в robots.txt, Googlebot может не получить нужный сигнал.
Лучше оставить /robots.txt доступным на старом домене и исключить его из общего редиректа. Так Google Search Console будет проще получить служебный файл и корректно проверить сайт.
