Google: тег noindex не отменяет сканирование сайта ботом
Существует несколько действенных способов, как можно контролировать сканирование ресурса поисковым роботом. Однако к ним не принадлежит использование тега noindex. На этом в очередной раз настаивает американский поисковик.
В частности, Джон Мюллер (John Mueller) в своем Твиттере на днях оставил запись следующего содержания:
"На самом деле noindex это команда группы индексирования. Она ни в коем разе не может ограничить сканирование сайта нашими пауками".
Таким образом, если вы до сих пор считаете, что данный тег способен каким-то образом запретить Гуглу вход на ваш сайт, то вы глубоко ошибаетесь. Для этой цели есть, к примеру, файл robots.txt, в котором можно прописать необходимые запреты для поисковиков.
Что же касается тега noindex, то Google очень даже хорошо сканирует те страницы, где он упоминается. А как иначе американская поисковая система узнает, что именно мы не хотим индексировать с его помощью?!
26 Мая 2017
Комментарии:
1
Возврат к списку
Комментарии пользователей:
|
у них в мануалах это все сказано уже, если гугл видит ссылку он ее скушает в любом случае, кроме случая .... секрет никому ни скажу=)
|
|