Как уменьшить частоту обхода вашего сайта в Гугл (Google)

Как уменьшить частоту обхода вашего сайта в Гугл (Google)

Инфраструктура Гугл (Google) для обхода сайтов использует сложные алгоритмы, чтобы определить оптимальную частоту обхода для сайта. Наша цель — обойти как можно больше страниц на вашем сайте за каждый визит, не перегружая ваш сервер. В некоторых случаях обход вашего сайта Гугл (Google) может приводить к значительной нагрузке на вашу инфраструктуру или вызывать нежелательные расходы в случае сбоев. Чтобы облегчить это, вы можете принять решение уменьшить количество запросов, отправляемых обходчиками Гугл (Google).

Разберитесь с причиной резкого увеличения частоты обхода вашего сайта в Гугл (Google)

Резкое увеличение частоты обхода может быть вызвано неэффективностью в структуре вашего сайта или другими проблемами на вашем сайте. На основе отчетов, полученных нами ранее, наиболее распространенные причины следующие:

  • Неэффективная конфигурация URL на сайте, что обычно происходит из-за особенностей функционала сайта:
    • Фасетная навигация или другие функции сортировки и фильтрации на сайте
    • Календарь с множеством URL для определенных дат
  • Целевая страница для динамических поисковых объявлений

Мы настоятельно рекомендуем проверить ваши серверные журналы доступа и связаться с вашим хостинг-провайдером, чтобы понять источник трафика и проверить, соответствует ли это одной из упомянутых причин резкого увеличения частоты обхода. Затем ознакомьтесь с нашими руководствами по управлению обходом URL фасетной навигации и оптимизации эффективности обхода.

Как срочно уменьшить трафик от обходчиков (в экстренных случаях) на вашем сайте в Гугл (Google)

Предупреждение: при принятии решения об уменьшении частоты обхода Гугл (Google) учитывайте, что это повлияет на весь сайт. Для поиска Гугл (Google)bot будет открывать меньше новых страниц, а уже существующие страницы будут обновляться реже (например, цены и доступность продуктов могут дольше отражаться в поиске), а удаленные страницы могут оставаться в индексе дольше. Для Гугл (Google) Ads ваши кампании могут быть отменены или приостановлены, а ваши объявления могут не показываться.

Если вам нужно срочно уменьшить частоту обхода на короткий период времени (например, на несколько часов или 1-2 дня), отправьте коды ответа HTTP 500, 503 или 429 вместо 200 на запросы обхода. Инфраструктура обхода Гугл (Google) уменьшит частоту обхода вашего сайта, если она встретит значительное количество URL, возвращающих коды ответов 500, 503 или 429 (например, если вы временно отключите сайт). Уменьшенная частота обхода будет касаться всего хостнейма вашего сайта (например, subdomain.example.com), как URL, которые возвращают ошибки, так и URL, которые возвращают контент. После уменьшения количества этих ошибок частота обхода автоматически начнет увеличиваться снова.

Предупреждение: мы не рекомендуем использовать этот метод на длительный срок (более 1-2 дней), так как это может негативно повлиять на то, как ваш сайт будет представлен в продуктах Гугл (Google). Например, если Гугл (Google)bot наблюдает такие коды ответа на одном и том же URL в течение нескольких дней, этот URL может быть исключен из индекса Гугл (Google).

Исключительные запросы на уменьшение частоты обхода для вашего сайта в Гугл (Google)

Если отправка ошибок обходчикам Гугл (Google) невозможна на вашей инфраструктуре, подайте специальный запрос, чтобы сообщить о проблеме с аномально высоким трафиком от обходчиков, указав оптимальную частоту обхода для вашего сайта. Вы не можете запрашивать увеличение частоты обхода, и для оценки и выполнения запроса может потребоваться несколько дней.

Вы можете связаться с seo компанией "seo.computer" по любому вопросу на email info@seo.computer, whatsapp +79202044461.

id 147

Отправьте заявку и мы предоставим консультацию на SEO продвижение вашего сайта