Яндекс.Вебмастер позволит менять скорость обхода сайта роботом

22 Февраля 2018 334

Функционал Яндекс.Вебмастера постоянно улучшается и на днях пополнился еще одним инструментом – «Скорость обхода». Новая опция доступна в разделе «Индексирование». Об этом команда Яндекса сообщила 15 февраля в своем блоге для вебмастеров.

Функционал позволит владельцам сайтов регулировать частность запросов к ресурсу со стороны ПС, то есть фактически задавать скорость обхода сайта роботами.

Судя по скриншоту (см. выше), пользователю предлагается выбрать из двух вариантов настройки скорости обхода сайта:

• довериться Яндексу – робот сам выберет наиболее оптимальную частоту индексирования ресурса с учетом нагрузки на сервер;
• задать индивидуальную скорость обхода, если у владельца сайта имеются свои предпочтения к ограничению частоты запросов к ресурсу.

Настройки скорости обхода можно было выставить еще неделю назад, но учитывать их Яндекс начал с сегодняшнего дня.

С появлением новой опции в Яндекс.Вебмастере поддержка директивы Crawl-delay в файле robots.txt, которая несла схожую функциональную нагрузку, больше не имеет смысла. Поэтому в компании сообщили, что отказываются от нее.

← Вернуться к новостям