robotst.txt для zend framework
Страницы: 1
robotst.txt для zend framework
Здравствуйте уважаемые форумчане!

Есть личный проект на zend framework. Возник вопрос по удалению некоторых страниц из индексации (дублей).

Во-первых страницы типа мойсайт.ру/catalog/view/106/?cid=0

гугл умный, он страницы с  ?cid=0 сам блокирует по групповому признаку, а вот яндекс не дошел еще до этого.

По какому признаку убрать в роботсе страницы с ?cid=0 ?

Также интересует вопрос по страницам, которые характеризуют источник захода с соц. сетей типа:

мойсайт.ру/review/486/#.UTL43I4WOrI.facebook

По какому признаку и каким образом можно удалить из индекса эти страницы? Опять же, гугл их игнорирует, яндекс индексирует и бросает в выдачу.

На сайте яндекса нашел конечно объяснения по второму варианту, но применить по признаку в своём варианте не смог. Кто сможет помочь, искать источник по разделу Директива Crawl-delay, или был опыт в прошлом.

Может вы поймете как использовать эту функцию в моём случае.

Спасибо огромное за помощь.
Страницы: 1
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
20:13 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
19:41 25$ (ежемесячно) AdSense 
21:39 Подскажите где продвигать сайт. 
10:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
19:12 Мошенники-копирайтеры 
08:57 Индексация страниц 
23:16 Есть ли альтернатива Адсенсу и РСЯ? 
23:58 Аккаунты работадателей HH.RU 
23:53 Продам аккаунты HH.RU 
23:40 GoogleWalker - устранение конкурентов в Google Ads | Автоматизированная система склика | АНТИБАН 
20:37 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
17:39 Ural-obmen.ru — выгодный сервис обмена 
14:06 Обменный пункт cashalot.one. Выгодный обмен. 
12:35 SpaceSwap.cc - Быстрый и надежный обменник криптовалют 
00:12 Огородники 
22:36 Точные прогнозы на футбол 
10:59 Новости искусственного интеллекта 
04:26 Хром ругается на форум 
18:41 С юмором по жизни! 
14:22 SENDERSEX.COM - Тизерная партнёрка онлайн игры Эротические Фанты Онлайн 
20:32 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди