Скрытие от индексации дублей страниц
Страницы: 1
Скрытие от индексации дублей страниц, убирать или нет?
Подскажите дельным советом!

Есть страница
http://tessuti-ital.ru/catalog/angora/

а есть:
http://tessuti-ital.ru/catalog/angora/?SORT=catalog_PRICE_1&ORDER=ASC

это тот же раздел, только с применением фильтра.

Считается ли это дублем страницы?
В robots.txt  поставил строчку : Disallow: /*SORT

теперь вот думаю, правильно ли поставил так. 4 тыс страниц вылетело из индекса smile:(   (всего индексировалось 10 тыс, после запрета на эти страницы стало 6 тыс в индексе)

Вопрос: Надо закрывать от индексации такие URL или ничего страшного и Яндекс не будет считать их дублями?
Все что дублирует основной контент сайта считается дублем (к ним относятся всевозможные фильты: сортировки, поиск по тегам и т.д. и т.п.).
Цитата
Дима Пин пишет:
В robots.txt поставил строчку : Disallow: /*SORT
Спецсимвол * - характеризует любую (в том числе пустую) последовательность символов. Данным правилом вы запрещаете доступ к любым страницам, содержащим SORT. Это может быть site.ru/?SORT=123 так и site.ru/catalog/SORT и т.д. Я бы исключал страницы для подобного примера вот так:Disallow: /?SORT* - запрет на индексацию каталога начинающегося с /?SORT с любой дальнейшей последовательностью символов - *.

Минус дублей - уменьшение веса страниц, содержащих контект (который дублируется). Это было и есть плохо. Так что блокировать всегда надо. Корректность прописанных правил вы сможете просмотреть в панели вебмастера --> Инструменты --> Анализ Robots.txt --> Разрешены ли URL
Изменено: Глеб Коваль - 21 Августа 2016 12:33
Правильно будет задать рел каноникал всем разделам (страницам) сайта. Они и будут учитываться как основные страницы разделов каталога. Страницы с фильтрацией типа как у Вас не будут иметь приоритет.
Цитата
Egor2014 пишет:
Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Все коротко и понятно:)
Цитата
Egor2014 пишет:
Страницы с фильтрацией типа как у Вас не будут иметь приоритет.
Но тогда может сложиться ситуация, когда в индексе будет куча ненужных страниц
Если нужно закрыть в роботсе конкретно эту конструкцию, то пропишите так: Disallow: *?SORT=Если есть аналогичные, то вместо SORT подставляйте то что нужно. 
А на счет рел каноникал - это обязательное условие. Реализуйте его.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
06:14 На биржах один ИИ-шлак. Вы как сейчас отбираете доноров? 
23:19 Ютуб выкашивает каналы за "Серийный контент". Как не отлететь? // Советы по выживанию 
22:34 Как такое возможно 
22:25 16.01.2026. Пятничный откат, глюки с регионами и "Нейро" в товарке 
22:22 Апдейт 20.01: Позиции вернули? // Рынок рекламы падает 
22:11 Адсенс "лежал" 13-15 января. У кого сегодня доход вернулся в норму? 
18:05 Статистика по "альтернативе": Есть ли смысл сейчас добавлять сайт в Rambler/Mail? 
04:14 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
23:53 Продажа аккаунтов HH.RU 
15:25 BestChange – обменивать электронную валюту можно быстро и выгодно 
14:12 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
08:55 Мониторинг обменников Сrypto-scout.io 
23:56 Portfel.cc - современный помощник в Ваших финансовых операциях. 
19:23 GoodsMoney.io 
20:14 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 
20:51 Кодерам приготовиться? DeepSeek анонсировал "монстра кодинга" на следующий месяц 
12:40 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 
20:57 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
15:17 SENDERSEX.COM - Тизерная партнёрка онлайн игры Эротические Фанты Онлайн 
18:50 Добро пожаловать в цифровой мир... 
22:14 Какой фильм вы любите посмотреть перед сном?