В Яндекс.Вебмастере можно будет регулировать скорость обхода сайта ботом

Новую функцию можно найти в разделе Яндекс.Вебмастера «Индексирование» (см. скрин ниже). С помощью нового инструмента владелец сайта сможет регулировать частотность запросов к веб-ресурсу со стороны поисковой системы Яндекс, то есть фактически задавать скорость обхода сайта поисковыми ботами.
В Яндекс.Вебмастере можно будет регулировать скорость обхода сайта ботом
Как свидетельствует изображение, на выбор пользователя предлагается два варианта настройки скорости обхода сайта. Во-первых, если владелец ресурса имеет свои предпочтения к ограничению частоты запросов к сайту, то в этом случае можно задать индивидуальную скорость обхода для отдельно взятого проекта.
Во-вторых, если таких предпочтений нет, то тогда можно всецело положиться на поисковую систему, выбрав опцию «Доверить Яндексу». В этой ситуации (по умолчанию) поисковик будет автоматически устанавливать максимальную скорость обхода для конкретного сайта с учетом допустимых нагрузок на сервер.
Установить нужную вам скорость обхода сайта можно прямо сейчас. Однако Яндекс начнет учитывать ваши настройки только с 22 февраля 2018 года.
В завершении нужно отметить, что с запуском в Яндекс.Вебмастере этого инструмента отпала необходимость в поддержке аналогичной по своей сути директивы Crawl-delay в файле robots.txt. Следовательно, в Яндексе заявили, что отказываются от нее.
Stfw.Ru
Читайте также



Примечание: При комментировании материала просим соблюдать законы Российской Федерации. Пожалуйста, воздержитесь от оскорблений и токсичного поведения.

Сводка событий

17:06 В Оренбурге по подозрению в мошенничестве задержан министр сельского хозяйства, пищевой и перерабатывающей промышленности региона


17:06 Какую электронную книгу выбрать для ежедневного использования


16:06 Смартфоны серии Meizu 16 представят уже в августе, они получат сканер отпечатков под экраном, а старший Meizu 16 Plus — тройную основную камеру


16:06 Смартфон OPPO Find X получит дисплей без выреза, занимающий 93,8% лицевой панели


16:06 Сейчас жетонами в киевском метро пользуется менее одной трети пассажиров, большинство оплачивает проезд картами метро


16:06 «Гарантированные 5,3 ГГц за $860»: Silicon Lottery предлагает отборные скальпированные Intel Core i7-8086K


16:06 Vodafone и украинские разработчики создадут краудсорсинговую систему видеонаблюдения, которая объединит уже существующие камеры и смартфоны пользователей с помощью 4G


16:06 Apple может запустить отдельный стриминговый сервис с более доступной чем у Netflix подпиской


16:06 Microsoft без лишнего шума выпустила обновление KB4056254 для Windows 10


16:06 Почему Минфин России продал половину имевшихся казначейских бумаг США?


16:06 Перуанца поймали в Москве на краже билетов на футбол у мексиканца


16:06 ЕС продлил антироссийские санкции из-за Крыма


16:06 В Кремле прокомментировали сбор подписей против пенсионной реформы


Основные этапы SEO оптимизации сайта для поисковой рекламы.