robotst.txt для zend framework
Страницы: 1
robotst.txt для zend framework
Здравствуйте уважаемые форумчане!

Есть личный проект на zend framework. Возник вопрос по удалению некоторых страниц из индексации (дублей).

Во-первых страницы типа мойсайт.ру/catalog/view/106/?cid=0

гугл умный, он страницы с  ?cid=0 сам блокирует по групповому признаку, а вот яндекс не дошел еще до этого.

По какому признаку убрать в роботсе страницы с ?cid=0 ?

Также интересует вопрос по страницам, которые характеризуют источник захода с соц. сетей типа:

мойсайт.ру/review/486/#.UTL43I4WOrI.facebook

По какому признаку и каким образом можно удалить из индекса эти страницы? Опять же, гугл их игнорирует, яндекс индексирует и бросает в выдачу.

На сайте яндекса нашел конечно объяснения по второму варианту, но применить по признаку в своём варианте не смог. Кто сможет помочь, искать источник по разделу Директива Crawl-delay, или был опыт в прошлом.

Может вы поймете как использовать эту функцию в моём случае.

Спасибо огромное за помощь.
Страницы: 1
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
19:29 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
17:29 Как продвигать сайт с неуникальным контентом 
14:50 Индексация страниц 
12:36 У кого новостник, дайте пару советов плиз 
13:53 AviTool - мощный инструмент для автоматизации работы с Avito 
17:01 Absence в Армении 
23:19 Ребята подскажите какими сервисами и прогами вы пользуетесь для SEO продвижения? 
23:25 Обменник криптовалюты OnlyCrypto 
19:18 Размещение статей, ссылок и постовых на качественных ресурсах 
16:32 Продажа аккаунтов HH.RU 
15:14 Новый белый офер на медицину! 
13:22 Linken Sphere – браузер-антидетект нового поколения 
04:12 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
22:29 InOut-Exchange.com - обменник 24/7, которому доверяют 
22:06 Добро пожаловать в цифровой мир... 
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 
22:08 Накрутка поисковых подсказок 
05:04 Точные прогнозы на футбол 
14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
12:23 150+ хакерских поисковых систем и инструментов