Google: при индексировании страниц сначала идет код статуса

Google: при индексировании страниц сначала идет код статуса
Google: при индексировании страниц сначала идет код статуса

Google может быть непростым; мы никогда не знаем, о чем он думает и какие изменения произведет. Тем не менее, как цифровые эксперты, мы постоянно пытаемся угодить поисковой системе.

Подумайте, была бы вообще без Google поисковая оптимизация?

Оптимизация нашего контента, веб-сайтов и других цифровых активов для поиска не является для нас чем-то новым. Мы знаем, что у Google есть алгоритмы, которые он использует, чтобы поднять нас выше в рейтинге и вознаградить за оптимизацию контента. Но большинство из нас не знает, что Google на самом деле проверяет коды состояния прежде всего.

Moz помогает нам лучше понимать коды состояния, описывая их как «интернет-эквивалент диалога между вашим браузером и сервером». Они сообщают, все ли между ними в порядке, все в порядке, или что-то не так.»

Недавняя статья в журнале Search Engine Journal содержит видео сеанса Hangouts в центральном офисе веб-мастеров с Джоном Мюллером из Google. В этом видео Мюллер рассказывает о том, как Google проверяет коды состояния HTTP страниц веб-сайта перед рендерингом или индексированием контента. Фактически, Google ничего не будет отображать, пока не вернет код состояния 200. Мюллер говорит, что Google не видит даже 404 страницы, то же самое касается 500 ошибок и редиректов.

Что означает сканирование контента и почему это важно?

При создании контента на вашем веб-сайте обычно конечная цель - показать его в результатах поиска. Чтобы это произошло, Google необходимо просканировать страницу и проиндексировать ее.

Сканирование - это деятельность, в которой участвует робот GoogleBot при поиске работоспособных страниц с 200 статусами. Индексирование описывает, что происходит, когда робот GoogleBot находит эти страницы и считает, что они «в порядке» для отображения в результатах поиска.

Если какая-либо из ваших страниц возвращает код 400 или 500, GoogleBot не будет двигаться дальше и не будет индексировать ваш контент, чтобы он отображался поисковикам. Фактически, возврат этих кодов состояния может нанести вред техническому состоянию вашего сайта.

Наличие страницы с ошибкой 400 bad request означает, что запрос на загрузку этой страницы был поврежден или неверен. Самый знакомый из них - ошибка 404. Это часто происходит, когда мы неправильно вводим URL-адрес или пытаемся перейти на страницу, которая больше не публикуется (и не имеет правильно настроенного перенаправления).

Если вы видите внутреннюю ошибку службы 500, это означает, что что-то на сервере сайта пошло не так, но конкретику проблемы выявить не удалось.

Как проверить коды страниц

Поскольку важно иметь полностью индексируемый контент, крайне важно знать, как проверять ошибки страниц.

Самый простой и быстрый способ сделать это - использовать онлайн-инструмент, такой как SEMrush или Screaming Frog.

Оба предлагают одинаковый аудит сайта, который обычно можно выполнить менее чем за час (в зависимости от размера вашего сайта). Результаты аудита покажут все коды состояния каждой из ваших страниц, так что вы сможете легко выбрать, какие из них требуют внимания.

В качестве альтернативы Google Search Console также может создать отчет с этой информацией (однако без полного аудита сайта), и это совершенно бесплатно.

Мы рекомендовали проводить подобный аудит не реже двух-трех раз в год.

Исправление кодов ошибок

В зависимости от причины фактической ошибки вам, возможно, придется попробовать различные способы ее устранения. Целью является код статуса 200, и на этих страницах вам не нужно ничего исправлять. Наличие кода статуса 300 также не требует никаких исправлений, но приятно знать, что Google не будет индексировать эту страницу; он будет индексировать страницу, на которую вы его перенаправили.

При 400 ошибках проверьте статус страницы. Была ли она когда-то опубликована, но сейчас осталась неопубликованной? В этом случае вам придется настроить перенаправление на действующую страницу.

Для 500 ошибок, возможно, вам придется немного покопаться. Эти типы кодов могут быть вызваны ошибкой разрешений, тайм-аутом PHP или ошибкой кодирования в файлах.htaccess. В таких случаях ваша CMS и ваш провайдер веб-хостинга, вероятно, имеют документированные справочные статьи или ресурсы, которые вы можете использовать, чтобы лучше понять, что происходит и как найти решение.

Что это значит для маркетологов?

Урок здесь прост: поскольку мы уделяем внимание как внутренним, так и техническим элементам SEO, которые влияют на рейтинг нашего сайта, нам необходимо уделять особое внимание кодам состояния

Регулярное проведение аудита сайта и обеспечение правильных перенаправлений при изменении страниц должны быть приоритетными.

Самое важное, что следует помнить: если Google распознает слишком много кодов ошибок на ваших страницах, это может обесценить ваш сайт. Это может уменьшить объем получаемого вами трафика, что, в свою очередь, может уничтожить возможности для дополнительного бизнеса.