Западные SEO-эксперты спорят об индексации

Такова человеческая природа, что, казалось бы, даже прописные истины человек норовит поставить под сомнение, предаться размышлениям, а все ли в них верно и нет ли каких-то скрытых факторов. Что же говорить тогда о вещах, которые не столь очевидны, например, о вопросах индексации.

Западные SEO-эксперты развернули активную дискуссию на тему, будет ли индексироваться URL, если сама страница закрыта файлом robots.txt или тегами noindex. На первый взгляд, вроде бы все четко и ясно, а ответ не вызывает сомнений. Но не тут-то было, если вопрос прозвучал в комнате, где собрались гуру SEO.

Как сообщает Барри Шварц, редактор Search Engine Roundtable, результаты споров стали весьма неожиданными. Причина возникшей дискуссии в том, что в поисковой выдаче Google периодически появляются ссылки на страницы сайтов, доступ к которым ограничен для поисковых роботов. Считается ли тогда, что URL проиндексирован?

К единому мнению специалисты так и не пришли. Кто-то думает, что страница индексируется, даже если ее не посетил поисковый робот, другой уверен, что робот сначала обязательно должен побывать на странице, иначе это нельзя назвать индексацией и т.д. В целом, получилась интересная дискуссия.

Отметим, что вопрос индексации закрытых от поисковых роботов страниц в 2009 году поднимал еще Мэтт Каттс. По его данным, Google не пропускает закрытую страницу, если на нее ссылаются другие ресурсы или же она присутствует в каталогах. В таком случае поисковик не индексирует саму страницу, но берет ссылку, которая может появиться в поисковой выдаче.

15 Февраля 2012
Комментарии: 2

Возврат к списку

Комментарии пользователей:

Это нравится:0 Да/0 Нет Igor Svedkoff 16 Февраля 2012
кстати я тоже такое замечал. делаю новый сайт заливаю туда движок ну и на первое время запрещаю индексацию, так как буду вносить туда дополнения. Проходит 1 неделя но страницы всё равно попадают в индекс касается это гугла!!!

Это нравится:0 Да/0 Нет maggok 16 Февраля 2012
будет в индексе у гугла

Новые темы	Объявления	Свободное общение
08:44 Ссылки с ответы майл ру 00:32 28 мая АП Яндекс выдача / До официального лета остались считанные дни 21:00 Партнерская программа Xoffers с прямыми офферами в вертикалях форекс, крипта и бинарные опционы. 20:40 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 15:59 TacoLoco - рекламная сеть от LosPollos. Большие объёмы качественного трафика! 15:20 Adtrafico - Правильная партнёрская сеть под бурж трафик 14:43 LGaming - экосистема и партнерская программа в gambling и betting вертикалях	00:03 Предлагаю услуги рерайтера и копирайтера 19:17 INSTACRYPT - приятный обменный сервис 11:54 Плагин Chat GPT для Wordpress - Автонаполнение сайтов (Easy GPT Content) 11:10 Готовые аккаунты Яндекс Директ с пройденной модерацией, с отлежкой, трастовые 03:54 Cosmochanger.cc - Самый реактивный обменник. Быстрый и безопасный способ обменять более 20 популярных криптовалют 20:13 Размещу ссылки/статьи на ваш сайт \| Рост ИКС \| XRumer 19.0.15 14:55 Вёрстка	09:52 Я придумал новую игру 00:36 Accvk.ru - магазин самых надёжных аккаунтов вконтакте и других социальных сетей [без владельцев] 23:58 Конец пандемии - конец притворству ВОЗ: Вакцины от ковида признаны опасными 20:03 С юмором по жизни! 19:54 Изменение цитаты в тексте 18:20 Выбрать вариант музыкальной темы 15:55 «Болезни Х»: медики из ВОЗ готовятся к новой смертельной пандемии