Западные SEO-эксперты спорят об индексации

Такова человеческая природа, что, казалось бы, даже прописные истины человек норовит поставить под сомнение, предаться размышлениям, а все ли в них верно и нет ли каких-то скрытых факторов. Что же говорить тогда о вещах, которые не столь очевидны, например, о вопросах индексации.

Западные SEO-эксперты развернули активную дискуссию на тему, будет ли индексироваться URL, если сама страница закрыта файлом robots.txt или тегами noindex. На первый взгляд, вроде бы все четко и ясно, а ответ не вызывает сомнений. Но не тут-то было, если вопрос прозвучал в комнате, где собрались гуру SEO.

Как сообщает Барри Шварц, редактор Search Engine Roundtable, результаты споров стали весьма неожиданными. Причина возникшей дискуссии в том, что в поисковой выдаче Google периодически появляются ссылки на страницы сайтов, доступ к которым ограничен для поисковых роботов. Считается ли тогда, что URL проиндексирован?

К единому мнению специалисты так и не пришли. Кто-то думает, что страница индексируется, даже если ее не посетил поисковый робот, другой уверен, что робот сначала обязательно должен побывать на странице, иначе это нельзя назвать индексацией и т.д. В целом, получилась интересная дискуссия.

Отметим, что вопрос индексации закрытых от поисковых роботов страниц в 2009 году поднимал еще Мэтт Каттс. По его данным, Google не пропускает закрытую страницу, если на нее ссылаются другие ресурсы или же она присутствует в каталогах. В таком случае поисковик не индексирует саму страницу, но берет ссылку, которая может появиться в поисковой выдаче.

15 Февраля 2012
Комментарии: 2

Возврат к списку

Комментарии пользователей:

Igor Svedkoff 16 Февраля 2012
кстати я тоже такое замечал. делаю новый сайт заливаю туда движок ну и на первое время запрещаю индексацию, так как буду вносить туда дополнения. Проходит 1 неделя но страницы всё равно попадают в индекс касается это гугла!!!

maggok 16 Февраля 2012
будет в индексе у гугла:mad:

Новые темы	Объявления	Свободное общение
21:40 Стоит ли добавлять сайт в Rambler топ 100? 12:39 2Index - быстрая индексация страниц сайта и обратных ссылок 07:14 Sіchere dir jеtzt 220 Freіsріele und bіs zu 2400Dоl 06:17 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам). 23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 21:20 Rotapost прикрыли! Чем пользоваться?	13:51 CryptoMonitor.info - ваш надеждный обменник BTC USDT XMR (без KYC) 13:16 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 11:11 Belurk — высокоскоростные анонимные прокси от 0,24 рублей 10:23 AllCharge.online. Современный, быстрый и надёжный обменник 04:13 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 01:31 Сайты с зарубежным трафиком КУПЛЮ 20:27 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств	10:29 С юмором по жизни! 16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты?