Скрытие от индексации дублей страниц
Страницы: 1
Скрытие от индексации дублей страниц, убирать или нет?
Подскажите дельным советом!

Есть страница
http://tessuti-ital.ru/catalog/angora/

а есть:
http://tessuti-ital.ru/catalog/angora/?SORT=catalog_PRICE_1&ORDER=ASC

это тот же раздел, только с применением фильтра.

Считается ли это дублем страницы?
В robots.txt  поставил строчку : Disallow: /*SORT

теперь вот думаю, правильно ли поставил так. 4 тыс страниц вылетело из индекса smile:(   (всего индексировалось 10 тыс, после запрета на эти страницы стало 6 тыс в индексе)

Вопрос: Надо закрывать от индексации такие URL или ничего страшного и Яндекс не будет считать их дублями?
Все что дублирует основной контент сайта считается дублем (к ним относятся всевозможные фильты: сортировки, поиск по тегам и т.д. и т.п.).
Цитата
Дима Пин пишет:
В robots.txt поставил строчку : Disallow: /*SORT
Спецсимвол * - характеризует любую (в том числе пустую) последовательность символов. Данным правилом вы запрещаете доступ к любым страницам, содержащим SORT. Это может быть site.ru/?SORT=123 так и site.ru/catalog/SORT и т.д. Я бы исключал страницы для подобного примера вот так:Disallow: /?SORT* - запрет на индексацию каталога начинающегося с /?SORT с любой дальнейшей последовательностью символов - *.

Минус дублей - уменьшение веса страниц, содержащих контект (который дублируется). Это было и есть плохо. Так что блокировать всегда надо. Корректность прописанных правил вы сможете просмотреть в панели вебмастера --> Инструменты --> Анализ Robots.txt --> Разрешены ли URL
Изменено: Глеб Коваль - 21 Августа 2016 12:33
Правильно будет задать рел каноникал всем разделам (страницам) сайта. Они и будут учитываться как основные страницы разделов каталога. Страницы с фильтрацией типа как у Вас не будут иметь приоритет.
Цитата
Egor2014 пишет:
Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Все коротко и понятноsmile:)
Цитата
Egor2014 пишет:
Страницы с фильтрацией типа как у Вас не будут иметь приоритет.
Но тогда может сложиться ситуация, когда в индексе будет куча ненужных страниц
Если нужно закрыть в роботсе конкретно эту конструкцию, то пропишите так: Disallow: *?SORT=Если есть аналогичные, то вместо SORT подставляйте то что нужно. 
А на счет рел каноникал - это обязательное условие. Реализуйте его.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
23:31 Глава Минцифры уверен, что "Яндекс" продолжит работу в России 
22:03 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
20:39 Pharmcash.net - монстр конверта Евро траффика 
20:36 Pharmcashusa.com. Есть USA фарма траф? Вам сюда! 
19:42 Marketcall - международная партнерская сеть с оплатой Pay Per Call и LeadGen 
19:32 СМИ: "Яндекс" ищет покупателя на поисковую систему, почту и "Кинопоиск" 
17:11 Lottery Partner в поиске партнеров! Самые высокие ставки! 
00:45 Перевод текста в речь нейросетями - сервис Zvukogram 
22:29 Coindrop.trade - обменник электронных валют 
21:29 Продвижения вашего сайта прогонами по базе с ИСК до 46000. Рост позиций по СЧ и НЧ запросам + рост ИКС 
18:58 Ural-obmen.ru — выгодный сервис обмена 
10:43 Obama.ru - безопасный обмен криптовалют и электронных денежных средств 
09:58 Дешевые просмотры YouTube с гарантией, лайки, подписчики Instagram, ВК, Facebook, ОK, Twitter - SmmPanele.Ru 
06:56 Настройки ленты на плагин Wpgrabber для WordPress 
19:38 Российский аналог Google Play наконец-то доступен всем желающим 
19:31 Выпущена российская ОС "Альт Рабочая станция К" 10 — бесплатная для домашнего использования 
09:56 С юмором по жизни! 
21:31 Обсуждение о раздаче 30 000 руб. или "первая доза бесплатно" 
10:35 Wildberries запустил свой… "Дзен" 
08:07 Куда мечтаете поехать, что бы хотели увидеть 
19:34 Критика "Искусство войны"