Скрытие от индексации дублей страниц
Страницы: 1
Скрытие от индексации дублей страниц, убирать или нет?
Подскажите дельным советом!

Есть страница
http://tessuti-ital.ru/catalog/angora/

а есть:
http://tessuti-ital.ru/catalog/angora/?SORT=catalog_PRICE_1&ORDER=ASC

это тот же раздел, только с применением фильтра.

Считается ли это дублем страницы?
В robots.txt  поставил строчку : Disallow: /*SORT

теперь вот думаю, правильно ли поставил так. 4 тыс страниц вылетело из индекса smile:(   (всего индексировалось 10 тыс, после запрета на эти страницы стало 6 тыс в индексе)

Вопрос: Надо закрывать от индексации такие URL или ничего страшного и Яндекс не будет считать их дублями?
Все что дублирует основной контент сайта считается дублем (к ним относятся всевозможные фильты: сортировки, поиск по тегам и т.д. и т.п.).
Цитата
Дима Пин пишет:
В robots.txt поставил строчку : Disallow: /*SORT
Спецсимвол * - характеризует любую (в том числе пустую) последовательность символов. Данным правилом вы запрещаете доступ к любым страницам, содержащим SORT. Это может быть site.ru/?SORT=123 так и site.ru/catalog/SORT и т.д. Я бы исключал страницы для подобного примера вот так:Disallow: /?SORT* - запрет на индексацию каталога начинающегося с /?SORT с любой дальнейшей последовательностью символов - *.

Минус дублей - уменьшение веса страниц, содержащих контект (который дублируется). Это было и есть плохо. Так что блокировать всегда надо. Корректность прописанных правил вы сможете просмотреть в панели вебмастера --> Инструменты --> Анализ Robots.txt --> Разрешены ли URL
Изменено: Глеб Коваль - 21 Августа 2016 12:33
Правильно будет задать рел каноникал всем разделам (страницам) сайта. Они и будут учитываться как основные страницы разделов каталога. Страницы с фильтрацией типа как у Вас не будут иметь приоритет.
Цитата
Egor2014 пишет:
Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Все коротко и понятноsmile:)
Цитата
Egor2014 пишет:
Страницы с фильтрацией типа как у Вас не будут иметь приоритет.
Но тогда может сложиться ситуация, когда в индексе будет куча ненужных страниц
Если нужно закрыть в роботсе конкретно эту конструкцию, то пропишите так: Disallow: *?SORT=Если есть аналогичные, то вместо SORT подставляйте то что нужно. 
А на счет рел каноникал - это обязательное условие. Реализуйте его.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
18:27 Push.House - рекламная платформа PUSH уведомлений 
17:59 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
17:33 Переводчик "Яндекса" признан лучшим в мире по качеству 
14:20 Сайт не реагирует на изменения в CSS 
13:36 Telegram введет монетизацию для владельцев каналов 
11:09 Доля пользователей Telegram достигла почти половины населения России 
11:53 Атака ботов 
18:48 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
17:03 4G/LTE Mobile Proxy 30+ geo  
15:57 Zombie.Cash - мультивалютный обменный пункт 24/7 | Меняем быстро, безопасно и выгодно 
14:24 Продам свои 16 сайтов 
11:40 Google Voice - OLD аккаунты "SMS и звонки" 
11:25 BeeSwap.gg - удобный сервис по обмену криптовалюты - выгодный курс - безопасность - анонимность - AML 
05:02 Удостоверение журналиста СМИ РФ. Официальное оформление в действующей редакции. Без предоплаты! 
17:37 37 противникам прививок от COVID грозят уголовные дела 
16:04 Workle.ru - это развод и мошенничество! 
16:00 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
15:57 С юмором по жизни! 
13:33 ФАС сделала замечания "Яндекс Такси" из-за цен 
13:29 Linux - это максимальная свобода 
13:28 "Пенсия" вас поджидает за углом