Скрытие от индексации дублей страниц

Сообщений: 47 Регистрация: Фев 2011

21 Августа 2016 11:49

Подскажите дельным советом!

Есть страница
http://tessuti-ital.ru/catalog/angora/

а есть:
http://tessuti-ital.ru/catalog/angora/?SORT=catalog_PRICE_1&ORDER=ASC

это тот же раздел, только с применением фильтра.

Считается ли это дублем страницы?
В robots.txt поставил строчку : Disallow: /*SORT

теперь вот думаю, правильно ли поставил так. 4 тыс страниц вылетело из индекса smile:(

(всего индексировалось 10 тыс, после запрета на эти страницы стало 6 тыс в индексе)

Вопрос: Надо закрывать от индексации такие URL или ничего страшного и Яндекс не будет считать их дублями?

Глеб Коваль

Сообщений: 75 Регистрация: Май 2016

21 Августа 2016 12:32

Все что дублирует основной контент сайта считается дублем (к ним относятся всевозможные фильты: сортировки, поиск по тегам и т.д. и т.п.).

Цитата
Дима Пин пишет: В robots.txt поставил строчку : Disallow: /*SORT

Спецсимвол * - характеризует любую (в том числе пустую) последовательность символов. Данным правилом вы запрещаете доступ к любым страницам, содержащим SORT. Это может быть site.ru/?SORT=123 так и site.ru/catalog/SORT и т.д. Я бы исключал страницы для подобного примера вот так:Disallow: /?SORT* - запрет на индексацию каталога начинающегося с /?SORT с любой дальнейшей последовательностью символов - *.

Минус дублей - уменьшение веса страниц, содержащих контект (который дублируется). Это было и есть плохо. Так что блокировать всегда надо. Корректность прописанных правил вы сможете просмотреть в панели вебмастера --> Инструменты --> Анализ Robots.txt --> Разрешены ли URL

Изменено: Глеб Коваль - 21 Августа 2016 12:33

Быстрый хостинг в Европе от 120 рублей

Egor2014

Сообщений: 447 Регистрация: Дек 2015

21 Августа 2016 20:23

Правильно будет задать рел каноникал всем разделам (страницам) сайта. Они и будут учитываться как основные страницы разделов каталога. Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Вячеслав Шаров

Сообщений: 9914 Регистрация: Июн 2015

22 Августа 2016 04:21

Цитата
Egor2014 пишет: Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Все коротко и понятно:)

✔(НЕЙРОСЕТЬ) Качественные живые посетители на ваш сайт, блог, канал — Бесплатно!!!

♛ЛУЧШИЙ ПРОВЕРЕННЫЙ и САМЫЙ НЕДОРОГОЙ ХОСТИНГ: АКЦИИ!

j.doe

Сообщений: 160 Регистрация: Июн 2016

22 Августа 2016 08:55

Цитата
Egor2014 пишет: Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Но тогда может сложиться ситуация, когда в индексе будет куча ненужных страниц

Egor2014 Сообщений: 447 Регистрация: Дек 2015	#6 22 Августа 2016 09:39 Если нужно закрыть в роботсе конкретно эту конструкцию, то пропишите так: Disallow: *?SORT=Если есть аналогичные, то вместо SORT подставляйте то что нужно. А на счет рел каноникал - это обязательное условие. Реализуйте его.

Новые темы	Объявления	Свободное общение
08:02 Штрафы за крипту до 2 млн + ап Яндекса 19 апреля - что опять поменяли и куда всё катится? 07:22 Скан глаза для Zoom и Tinder + ап Яндекса 21 апреля. К этому реально всё идёт? 07:03 Заказал "положить сайт" а положили тебя? Полиция добралась до клиентов DDoS-сервисов 06:54 Claude по паспорту + апдейт Яндекса 17 апреля - у кого что по выдаче 20:10 В Яндексе позиции держатся, а трафик проседает - стало заметно сильнее 17:05 ИКС Яндекс АПдейт 1 апреля 2026. Обновлён алгоритм расчёта 16:58 Ап выдачи Яндекса 8 апреля - есть движение, но интереснее что творится с AI-ответами Google	09:13 Monitex: Мониторинг с кэшбэком 80% в USDT 05:09 От $0.015 за IP \| $0.68 за ГБ \| 9PROXY.COM \| 20+ млн резидентных прокси \| 99,95% аптайм \| Без чёрных списков 23:49 GoodsMoney.io 23:48 Volna.money 22:34 [UPDATE] CryptoMonitor — обмен BTC, USDT, XMR \| актуальная тема сервиса 21:31 Прошу оценить сайт 20:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств	08:08 ЕС сделал проверку возраста, а её уже ломают за минуты. Серьёзно? 19:57 Во Франции начали штрафовать за IPTV - до 300-400 евро уже прилетает обычным пользователям 19:36 Список обновленных тем пуст... 17:02 арбитражники 12:26 Заработок на загрузочном сайте в 2026? 09:49 Точные прогнозы на футбол 02:22 Ставки на супер тренды в спорте

Новые темы

Объявления

Свободное общение

08:02 Штрафы за крипту до 2 млн + ап Яндекса 19 апреля - что опять поменяли и куда всё катится?
07:22 Скан глаза для Zoom и Tinder + ап Яндекса 21 апреля. К этому реально всё идёт?
07:03 Заказал "положить сайт" а положили тебя? Полиция добралась до клиентов DDoS-сервисов
06:54 Claude по паспорту + апдейт Яндекса 17 апреля - у кого что по выдаче
20:10 В Яндексе позиции держатся, а трафик проседает - стало заметно сильнее
17:05 ИКС Яндекс АПдейт 1 апреля 2026. Обновлён алгоритм расчёта
16:58 Ап выдачи Яндекса 8 апреля - есть движение, но интереснее что творится с AI-ответами Google

09:13 Monitex: Мониторинг с кэшбэком 80% в USDT
05:09 От $0.015 за IP | $0.68 за ГБ | 9PROXY.COM | 20+ млн резидентных прокси | 99,95% аптайм | Без чёрных списков
23:49 GoodsMoney.io
23:48 Volna.money
22:34 [UPDATE] CryptoMonitor — обмен BTC, USDT, XMR | актуальная тема сервиса
21:31 Прошу оценить сайт
20:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств

08:08 ЕС сделал проверку возраста, а её уже ломают за минуты. Серьёзно?
19:57 Во Франции начали штрафовать за IPTV - до 300-400 евро уже прилетает обычным пользователям
19:36 Список обновленных тем пуст...
17:02 арбитражники
12:26 Заработок на загрузочном сайте в 2026?
09:49 Точные прогнозы на футбол
02:22 Ставки на супер тренды в спорте

18.02.2021 06:36	Методы, способы, сервисы ускорения индексации дропов?
27.11.2019 16:48	нужен грамотный юрист\адвокат по вопросу авторских прав, индексации.
10.12.2017 14:45	Закрыть от индексации аватарки
07.03.2017 12:11	Скрытие ссылок от индексации в DLE
13.06.2016 12:07	Закрываем от индексации "мусор"