Новый подход запрета индексации страниц от Google через .htaccess?
Страницы: 1
Новый подход запрета индексации страниц от Google через .htaccess?
Думаю тема актуальна...
Наткнулся недавно на статью, где предложен вариант запрета страниц от Google.
Хотелось бы обсудить данный способ.
Вот: http://imakescript.ru/novyiy-podhod-zapreta-indeksatsii-papki-ot-google/
Тизерная сеть для Женских сайтов: цена клика 3-5 рублей!

Новая биржа контента: цена = качество!
Цитата
GdeProfit пишет:
Наткнулся недавно на статью, где предложен вариант запрета страниц от Google.
Это скорее запрет индексации папок, а не страниц.
По моему с папками прекрасно справляется и robots.txt
веб-профан, сео-пессимизатор, фуфлогонщик и дзенофоб
Цитата
Ять пишет:
По моему с папками прекрасно справляется и robots.txt
А например feed, через роботс не закрыть вроде? Все равно в индекс попадает...
Цитата
GdeProfit пишет:
Цитата
Ять пишет:
По моему с папками прекрасно справляется и robots.txt
А например feed, через роботс не закрыть вроде? Все равно в индекс попадает...
По своему опоту скажу, что Гугл похоже вообще не обращает внимание на robots.txt, индексирует всё, при этом у страниц, которые запрещены к индексации, под тайтлом в выдаче написано, что-то про то, что доступ к странице ограничен с помощью файла robots.txt
Цитата
Максим пишет:
под тайтлом в выдаче написано, что-то про то, что доступ к странице ограничен с помощью файла robots.txt
В этом то и проблема.
Цитата
Максим пишет:
Гугл похоже вообще не обращает внимание на robots.txt, индексирует всё, при этом у страниц, которые запрещены к индексации, под тайтлом в выдаче написано, что-то про то, что доступ к странице ограничен с помощью файла robots.txt
Этого легко избежать совершенно не применяя robots.txt отдавая на желаемых страницах заголовок X-Robots-Tag: noindex, noarchive.
Цитата
SynyAlex пишет:
Этого легко избежать совершенно не применяя robots.txt отдавая на желаемых страницах заголовок X-Robots-Tag: noindex, noarchive.
А как это реализовать, можно подробнее?
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
13:29 Buymedia.biz - рекламная сеть 
19:42 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
17:12 Bropush - твой бро в монетизации сайта push-уведомлениями 
15:02 Adtrafico - Правильная партнёрская сеть под бурж трафик 
09:06 Подскажите сервис который подскажет по каким самым нелепым запросам страница в топ-10 
18:35 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
13:31 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 
13:38 XMLSEO сервис купли-продажи Яндекс.XML лимитов и выдачи Яндекс, Wordstst и Google 
10:49 USMobileSMSBot - 
06:03 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
20:37 Sova.gg - надежный обменник криптовалюты. 
20:11 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 
20:11 Криптовалютный обменник Xgram.io - новое воплощение качества 
16:53 Burzh.top|Партнерская программа под любой вид трафика (email, спам, УБТ) 
21:12 Каспкрски ОС 
16:41 Точные прогнозы на футбол 
22:58 У меня дикая просадка по РСЯ за последние 3 суток 
21:51 Linux - это максимальная свобода 
21:33 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
14:38 Продажи российских компьютеров в РФ выросли вдвое 
12:29 Карпаты