Западные SEO-эксперты спорят об индексации
Западные SEO-эксперты спорят об индексацииТакова человеческая природа, что, казалось бы, даже прописные истины человек норовит поставить под сомнение, предаться размышлениям, а все ли в них верно и нет ли каких-то скрытых факторов. Что же говорить тогда о вещах, которые не столь очевидны, например, о вопросах индексации.

Западные SEO-эксперты развернули активную дискуссию на тему, будет ли индексироваться URL, если сама страница закрыта файлом robots.txt или тегами noindex. На первый взгляд, вроде бы все четко и ясно, а ответ не вызывает сомнений. Но не тут-то было, если вопрос прозвучал в комнате, где собрались гуру SEO.

Как сообщает Барри Шварц, редактор Search Engine Roundtable, результаты споров стали весьма неожиданными. Причина возникшей дискуссии в том, что в поисковой выдаче Google периодически появляются ссылки на страницы сайтов, доступ к которым ограничен для поисковых роботов. Считается ли тогда, что URL проиндексирован?

К единому мнению специалисты так и не пришли. Кто-то думает, что страница индексируется, даже если ее не посетил поисковый робот, другой уверен, что робот сначала обязательно должен побывать на странице, иначе это нельзя назвать индексацией и т.д. В целом, получилась интересная дискуссия.

Отметим, что вопрос индексации закрытых от поисковых роботов страниц в 2009 году поднимал еще Мэтт Каттс. По его данным, Google не пропускает закрытую страницу, если на нее ссылаются другие ресурсы или же она присутствует в каталогах. В таком случае поисковик не индексирует саму страницу, но берет ссылку, которая может появиться в поисковой выдаче.

15 Февраля 2012
Комментарии:  2

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Igor Svedkoff
кстати я тоже такое замечал. делаю новый сайт заливаю туда движок ну и на первое время запрещаю индексацию, так как буду вносить туда дополнения. Проходит 1 неделя но страницы всё равно попадают в индекс касается это гугла!!!
Это нравится:0Да/0Нет
maggok
будет в индексе у гуглаsmile:mad:
Новые темыОбъявленияСвободное общение
20:50 Нормальный софт для накрутки ПФ в Яндекс 
20:48 "Яндекс" работает над отечественным аналогом нейросети ChatGPT 
20:47 Первый Апдейт в крайний месяц зимы / 01.02.23 Яндекс выдача 
19:59 Как сделать правильно robot.txt 
14:04 Сервисы и ПО для накрутки ПФ 
14:00 Партнерская программа OWNR WALLET 
13:34 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
23:35 Продам базу данных Банки/физы/пенсы/БАДы 
22:09 Европейский эквайринг 
21:08 [Telegram +] Рассылка в ЛС/По чатам, Инвайтинг! В Телеграм 
21:08 [Вконтакте +] Массовые рассылки в ЛС/В сообщения группам. Сбор аудитории без доплат 
21:08 [Email, Phone, Data...] Парсинг, сбор данных с любых сайтов 
21:08 Провожу обучение по работе с Телеграм  
21:07 Рассылка в Директ. Инстаграм от 10 копеек! Вайбер от 30 коп! 
21:02 "Известия": Ноутбуки в России подешевели на 15-30% 
20:45 Microsoft заставит пользователей обновить Windows 11 
19:35 Linux - это максимальная свобода 
15:47 Добро пожаловать в цифровой мир... 
12:15 "Яндекс Маркет" начал выкупать у россиян ношеную одежду и обувь 
12:11 Помогите придумать самый интересный вопрос 
07:22 Николай Дроздов раскрыл причину, по которой переломал ребра: "Последствия моей вегетарианской жизни"