Скрытие от индексации дублей страниц

Сообщений: 47 Регистрация: Фев 2011

21 Августа 2016 11:49

Подскажите дельным советом!

Есть страница
http://tessuti-ital.ru/catalog/angora/

а есть:
http://tessuti-ital.ru/catalog/angora/?SORT=catalog_PRICE_1&ORDER=ASC

это тот же раздел, только с применением фильтра.

Считается ли это дублем страницы?
В robots.txt поставил строчку : Disallow: /*SORT

теперь вот думаю, правильно ли поставил так. 4 тыс страниц вылетело из индекса smile:(

(всего индексировалось 10 тыс, после запрета на эти страницы стало 6 тыс в индексе)

Вопрос: Надо закрывать от индексации такие URL или ничего страшного и Яндекс не будет считать их дублями?

Глеб Коваль

Сообщений: 75 Регистрация: Май 2016

21 Августа 2016 12:32

Все что дублирует основной контент сайта считается дублем (к ним относятся всевозможные фильты: сортировки, поиск по тегам и т.д. и т.п.).

Цитата
Дима Пин пишет: В robots.txt поставил строчку : Disallow: /*SORT

Спецсимвол * - характеризует любую (в том числе пустую) последовательность символов. Данным правилом вы запрещаете доступ к любым страницам, содержащим SORT. Это может быть site.ru/?SORT=123 так и site.ru/catalog/SORT и т.д. Я бы исключал страницы для подобного примера вот так:Disallow: /?SORT* - запрет на индексацию каталога начинающегося с /?SORT с любой дальнейшей последовательностью символов - *.

Минус дублей - уменьшение веса страниц, содержащих контект (который дублируется). Это было и есть плохо. Так что блокировать всегда надо. Корректность прописанных правил вы сможете просмотреть в панели вебмастера --> Инструменты --> Анализ Robots.txt --> Разрешены ли URL

Изменено: Глеб Коваль - 21 Августа 2016 12:33

Быстрый хостинг в Европе от 120 рублей

Egor2014

Сообщений: 447 Регистрация: Дек 2015

21 Августа 2016 20:23

Правильно будет задать рел каноникал всем разделам (страницам) сайта. Они и будут учитываться как основные страницы разделов каталога. Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Вячеслав Шаров

Сообщений: 9909 Регистрация: Июн 2015

22 Августа 2016 04:21

Цитата
Egor2014 пишет: Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Все коротко и понятно:)

✔(НЕЙРОСЕТЬ) Качественные живые посетители на ваш сайт, блог, канал — Бесплатно!!!

♛ЛУЧШИЙ ПРОВЕРЕННЫЙ и САМЫЙ НЕДОРОГОЙ ХОСТИНГ: АКЦИИ!

j.doe

Сообщений: 160 Регистрация: Июн 2016

22 Августа 2016 08:55

Цитата
Egor2014 пишет: Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Но тогда может сложиться ситуация, когда в индексе будет куча ненужных страниц

Egor2014 Сообщений: 447 Регистрация: Дек 2015	#6 22 Августа 2016 09:39 Если нужно закрыть в роботсе конкретно эту конструкцию, то пропишите так: Disallow: *?SORT=Если есть аналогичные, то вместо SORT подставляйте то что нужно. А на счет рел каноникал - это обязательное условие. Реализуйте его.

Новые темы	Объявления	Свободное общение
11:22 Статистика по "альтернативе": Есть ли смысл сейчас добавлять сайт в Rambler/Mail? 08:21 Ютуб выкашивает каналы за "Серийный контент". Как не отлететь? // Советы по выживанию 01:45 ERNIE 5.0: Халявный "убийца" GPT-5 или китайская ловушка? 01:00 24.01. Апдейт: Шторм продолжается // Штрафы 700к за Google ID: готовимся? 00:29 Минус 30% дохода? Chrome теперь скрывает футерные баннеры (Sticky Ads) 23:15 Нашел скрины выплат с Сапы за 2010 год. Пошел плакать 22:10 Как перезаписать значений в базе данных	12:24 Nexulume.com Обменник без AML и KYC 10:30 Mixmasters - Exchange without AML and KYC 04:12 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 18:42 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 17:40 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 16:10 SwapPix.io - быстрый и безопасный обменник криптовалют. 13:23 Баллы сервисов накрутки соц.сетей Likest.ru Vto.pe Bosslike.ru Магазин https://minishop.rents.ac/	08:20 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 08:18 Тренера "Сочи" обвинили, что он рулил через ChatGPT. Игрокам предложили не спать 28 часов 10:45 Подтягиваем физкультурку 08:58 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 08:09 Владельцы "китайцев" 3-леток, признавайтесь честно — сгнили или едут? 17:27 Курс доллара упал ниже 85 рублей 11:00 Наши машинки

Новые темы

Объявления

Свободное общение

11:22 Статистика по "альтернативе": Есть ли смысл сейчас добавлять сайт в Rambler/Mail?
08:21 Ютуб выкашивает каналы за "Серийный контент". Как не отлететь? // Советы по выживанию
01:45 ERNIE 5.0: Халявный "убийца" GPT-5 или китайская ловушка?
01:00 24.01. Апдейт: Шторм продолжается // Штрафы 700к за Google ID: готовимся?
00:29 Минус 30% дохода? Chrome теперь скрывает футерные баннеры (Sticky Ads)
23:15 Нашел скрины выплат с Сапы за 2010 год. Пошел плакать
22:10 Как перезаписать значений в базе данных

12:24 Nexulume.com Обменник без AML и KYC
10:30 Mixmasters - Exchange without AML and KYC
04:12 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
18:42 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
17:40 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust
16:10 SwapPix.io - быстрый и безопасный обменник криптовалют.
13:23 Баллы сервисов накрутки соц.сетей Likest.ru Vto.pe Bosslike.ru Магазин https://minishop.rents.ac/

08:20 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем
08:18 Тренера "Сочи" обвинили, что он рулил через ChatGPT. Игрокам предложили не спать 28 часов
10:45 Подтягиваем физкультурку
08:58 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко
08:09 Владельцы "китайцев" 3-леток, признавайтесь честно — сгнили или едут?
17:27 Курс доллара упал ниже 85 рублей
11:00 Наши машинки

18.02.2021 06:36	Методы, способы, сервисы ускорения индексации дропов?
27.11.2019 16:48	нужен грамотный юрист\адвокат по вопросу авторских прав, индексации.
10.12.2017 14:45	Закрыть от индексации аватарки
07.03.2017 12:11	Скрытие ссылок от индексации в DLE
13.06.2016 12:07	Закрываем от индексации "мусор"