Западные SEO-эксперты спорят об индексации
Западные SEO-эксперты спорят об индексацииТакова человеческая природа, что, казалось бы, даже прописные истины человек норовит поставить под сомнение, предаться размышлениям, а все ли в них верно и нет ли каких-то скрытых факторов. Что же говорить тогда о вещах, которые не столь очевидны, например, о вопросах индексации.

Западные SEO-эксперты развернули активную дискуссию на тему, будет ли индексироваться URL, если сама страница закрыта файлом robots.txt или тегами noindex. На первый взгляд, вроде бы все четко и ясно, а ответ не вызывает сомнений. Но не тут-то было, если вопрос прозвучал в комнате, где собрались гуру SEO.

Как сообщает Барри Шварц, редактор Search Engine Roundtable, результаты споров стали весьма неожиданными. Причина возникшей дискуссии в том, что в поисковой выдаче Google периодически появляются ссылки на страницы сайтов, доступ к которым ограничен для поисковых роботов. Считается ли тогда, что URL проиндексирован?

К единому мнению специалисты так и не пришли. Кто-то думает, что страница индексируется, даже если ее не посетил поисковый робот, другой уверен, что робот сначала обязательно должен побывать на странице, иначе это нельзя назвать индексацией и т.д. В целом, получилась интересная дискуссия.

Отметим, что вопрос индексации закрытых от поисковых роботов страниц в 2009 году поднимал еще Мэтт Каттс. По его данным, Google не пропускает закрытую страницу, если на нее ссылаются другие ресурсы или же она присутствует в каталогах. В таком случае поисковик не индексирует саму страницу, но берет ссылку, которая может появиться в поисковой выдаче.

15 Февраля 2012
Комментарии:  2

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Igor Svedkoff
кстати я тоже такое замечал. делаю новый сайт заливаю туда движок ну и на первое время запрещаю индексацию, так как буду вносить туда дополнения. Проходит 1 неделя но страницы всё равно попадают в индекс касается это гугла!!!
Это нравится:0Да/0Нет
maggok
будет в индексе у гуглаsmile:mad:
Новые темыОбъявленияСвободное общение
02:43 15 августа / Яндекс выдача 
22:53 тИЦ: Проверьте данные в вебмастере 
22:35 Рамка в углах 
19:58 Рекламная сеть яндекса личный опыт 
18:37 2 акаунт адсенс: продать или оставить себе?? 
17:50 Безвозмездная помощь по дизайну 
16:41 FbSender - Программа для раскрутки и продвижения в Facebook 
06:24 Восстанавливаю Целиком и Полностью сайты из Вебархива (Webarchive) 
22:08 Продаю автонаполняемый СМИ 425 тИц 
22:06 Продам аккаунт Adsense (6 лет, пин, были выплаты) 
20:19 Продам базу паролей для брута дедиков. 
20:18 Доброго времени суток, предлагаю вашему вниманию дешевые Dedicated Servers(дедики)! 
18:49 Семантическое ядро с ручной группировкой и НК ключами 
18:24 OkSender – программа для продвижения в социальной сети Одноклассники. 
08:21 Поймал фильтр от Яндекса «Обман пользователей мобильного интернета», потерял мобильный траф. 
22:48 Biggico - крипто партнерская сеть | выплаты в BTC, ETH, фиате, | Revenue Share, CPA, CPL офферы 
21:34 Переезд сайта с домена на домен вопрос. 
20:32 Прямоугольник на сайте 
17:37 Кэшбери - это 
16:31 8088 - Прием юридических обращений из Москвы, СПб, Екатеринбурга, Челябинска и других регионов 
15:48 Blockchain Life 2018 - 2-ой ежегодный международный форум по блокчейну, криптовалюте и майнингу