С 22 февраля 2018 года Яндекс прекратил учитывать директиву Crawl-delay. Это решение касалось всех сайтов, включая сайты вашего сайта. Подробности об изменениях можно прочитать в официальном блоге Яндекса.
Для регулировки скорости обхода роботов Яндекс, используйте инструмент "Скорость обхода сайта" в Яндекс Вебмастере.
Если вам нужно задать параметры скорости, с которой роботы Яндекс будут загружать страницы сайта вашего сайта, лучше воспользоваться инструментом, предоставляемым Яндекс Вебмастером. Эта настройка позволит вам более точно контролировать скорость индексации.
Для настройки необходимо перейти в раздел "Скорость обхода" в Яндекс Вебмастере. В этом разделе можно выбрать предпочтительную скорость, с которой Яндекс будет загружать страницы вашего сайта.
Вы также можете обратиться в службу поддержки Яндекс, если возникнут вопросы или потребуется помощь при настройке. Кроме того, для более точной настройки и получения рекомендаций по улучшению индексации на вашем сайте, вы можете изучить другие доступные инструменты Яндекс для вебмастеров.
Для получения подробной консультации по настройке и улучшению видимости вашего сайта в Яндекс, вы можете связаться с seo-компанией "seo.computer" по email info@seo.computer или по WhatsApp +79202044461.
id 53