Google: мета-тег noindex гораздо эффективнее команды disallow

В частности, один из веб-мастеров поинтересовался у
Джона Мюллера, будет ли достаточно для этой цели использовать команду disallow в файле robots.txt?
Ответ официального представителя Google оказался довольно обширным:
«Необходимо понимать одну простую вещь. Блокировка страниц в robots.txt не дает полной гарантии. Может случиться так, что на заблокированные таким образом страницы с других сайтов кто-то будет ссылаться. В этом случае для нас факт внешней ссылки приоритетен. Следовательно, вполне возможен вариант, когда мы, перейдя по такой ссылке, проиндексируем страницу, которую вы якобы закрыли в файле robots.txt. И если эта страница, скажем, пустая (некачественная), то это не пойдет на пользу сайту.
Учитывая сказанное, я бы рекомендовал использовать мета-тег noindex вместо команды disallow. Перейдя по внешней ссылке и обнаружив указанный тег, Google не станет индексировать ее содержимое. Страница будет навсегда исключена из поискового индекса. Пока noindex не будет отменен».
Stfw.Ru
Читайте также


Оставить комментарий
Имя:  

Комментарий:

Примечание: При комментировании материала просим соблюдать законы Российской Федерации. Пожалуйста, воздержитесь от оскорблений и токсичного поведения.

Сводка событий

03:12 Qualcomm хочет расширить перечень iPhone, которые запрещено продавать в Китае, а Apple игнорирует предыдущий запрет


03:12 Infiniti показала первое изображение электрического кроссовера, который представит уже на Детройтском автошоу в январе 2019 года


03:12 Лукашенко заподозрил Москву в попытках инкорпорировать Белоруссию в Россию


03:12 Глава МВД Франции подтвердил ликвидацию террориста в Страсбурге


03:12 Войска ДНР привели в полную боевую готовность


03:12 В ЛНР заявили о прибытии танков ВСУ и понтонов производства Великобритании к линии соприкосновения


03:12 Virgin Galactic заявила, что ее туристический корабль впервые достиг "космической высоты" (Аппарат SpaceShipTwo поднялся на отметку 82,7 км)


16:12 Archer C6 — экспресс-обзор роутера TP-Link


16:12 Припейд-абоненты Vodafone теперь могут зарегистрировать свой номер в онлайне с помощью ЭЦП или Mobile ID


16:12 В минувшем квартале за нарушение правил с YouTube было удалено 58 млн видео, 1,7 млн каналов и 224 млн комментариев


16:12 «Красные» снова без вождя. Новый глава AMD Radeon Technologies Group не проработал в компании и года


16:12 «123456, password и… donald». Опубликован рейтинг худших паролей 2018 года


16:12 Metro Exodus отправилась в печать и выйдет на неделю раньше, опубликован вступительный ролик


Основные этапы SEO оптимизации сайта для поисковой рекламы.