Скрытие от индексации дублей страниц

Сообщений: 47 Регистрация: Фев 2011

21 Августа 2016 11:49

Подскажите дельным советом!

Есть страница
http://tessuti-ital.ru/catalog/angora/

а есть:
http://tessuti-ital.ru/catalog/angora/?SORT=catalog_PRICE_1&ORDER=ASC

это тот же раздел, только с применением фильтра.

Считается ли это дублем страницы?
В robots.txt поставил строчку : Disallow: /*SORT

теперь вот думаю, правильно ли поставил так. 4 тыс страниц вылетело из индекса smile:(

(всего индексировалось 10 тыс, после запрета на эти страницы стало 6 тыс в индексе)

Вопрос: Надо закрывать от индексации такие URL или ничего страшного и Яндекс не будет считать их дублями?

Бесплатная контекстная реклама

Глеб Коваль

Сообщений: 75 Регистрация: Май 2016

21 Августа 2016 12:32

Все что дублирует основной контент сайта считается дублем (к ним относятся всевозможные фильты: сортировки, поиск по тегам и т.д. и т.п.).

Цитата
Дима Пин пишет: В robots.txt поставил строчку : Disallow: /*SORT

Спецсимвол * - характеризует любую (в том числе пустую) последовательность символов. Данным правилом вы запрещаете доступ к любым страницам, содержащим SORT. Это может быть site.ru/?SORT=123 так и site.ru/catalog/SORT и т.д. Я бы исключал страницы для подобного примера вот так:Disallow: /?SORT* - запрет на индексацию каталога начинающегося с /?SORT с любой дальнейшей последовательностью символов - *.

Минус дублей - уменьшение веса страниц, содержащих контект (который дублируется). Это было и есть плохо. Так что блокировать всегда надо. Корректность прописанных правил вы сможете просмотреть в панели вебмастера --> Инструменты --> Анализ Robots.txt --> Разрешены ли URL

Изменено: Глеб Коваль - 21 Августа 2016 12:33

Быстрый хостинг в Европе от 120 рублей

Egor2014

Сообщений: 447 Регистрация: Дек 2015

21 Августа 2016 20:23

Правильно будет задать рел каноникал всем разделам (страницам) сайта. Они и будут учитываться как основные страницы разделов каталога. Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Вячеслав Шаров

Сообщений: 8734 Регистрация: Июн 2015

22 Августа 2016 04:21

Цитата
Egor2014 пишет: Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Все коротко и понятно smile:)

♛ЛУЧШИЙ ПРОВЕРЕННЫЙ И САМЫЙ ДЕШЕВЫЙ ХОСТИНГ: HTTPS+АНТИВИРУС БЕСПЛАТНО!(ПОСТОЯННЫЕ АКЦИИ!)

✔СТАБИЛЬНЫЙ ЗАРАБОТОК БЕЗ НАПРЯГОВ-ОГРОМНЫЙ ПОДАРОЧНЫЙ БОНУС НА ВАШ СЧЕТ В $!

j.doe

Сообщений: 160 Регистрация: Июн 2016

22 Августа 2016 08:55

Цитата
Egor2014 пишет: Страницы с фильтрацией типа как у Вас не будут иметь приоритет.

Но тогда может сложиться ситуация, когда в индексе будет куча ненужных страниц

Egor2014 Сообщений: 447 Регистрация: Дек 2015	#6 22 Августа 2016 09:39 Если нужно закрыть в роботсе конкретно эту конструкцию, то пропишите так: Disallow: *?SORT=Если есть аналогичные, то вместо SORT подставляйте то что нужно. А на счет рел каноникал - это обязательное условие. Реализуйте его.

Новые темы	Объявления	Свободное общение
20:25 Продвижение запросов для интернет-магазина - Яндекс Коллекции - 3000 ссылок 19:13 Как перенести статьи со старого сайта на новый. 17:19 АП ИКС 27.03.2020 \| Апдейт Яндекс ИКС 27 марта 2020 17:09 Нужно поменять сертификат безопасности с http на https 15:06 Plerdy - маркетинг онлайн-платформа с помощью которой вы точно улучшите UX, SEO и увеличите конверсию сайта 02:13 Быстрое продвижение сайта в ТОП Яндекса. Рост трафика и позиций. 01:44 одинаковые H2 на разных страницах сайта	20:25 Продам банковский сайт (6 лет, кредиты, займы, кредитные карты) 19:06 Human Emulator. Автоматизация действий пользователя в браузере. 17:37 Прогон по личной базе, больше 1000 трастовых сайтов! Продвижение СЧ и НЧ запросов + рост показателей! Гарантии! 16:51 BestChange – обменивать электронную валюту можно быстро и выгодно 16:48 Ищем партнеров (сотрудничество с веб-студией) 15:45 Антидетект браузер GoLoginApp. Бесплатные прокси. 15:43 Вечные ссылки с ТОПОВЫХ ресурсов! Размещение вечных трастовых ссылок с тИЦ от + 1000 до +45000	07:39 Конкурс статей XRumer 2020 18:35 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 18:04 Ваш сайт блокируют гос органы? Есть решение! 19:03 Что с трафиком? 15:19 Новостной сайт с ноля 08:45 Вопрос о курсах 18:19 Plussy - лучшая партнерка для гемблинг

Новые темы

Объявления

Свободное общение

20:25 Продвижение запросов для интернет-магазина - Яндекс Коллекции - 3000 ссылок
19:13 Как перенести статьи со старого сайта на новый.
17:19 АП ИКС 27.03.2020 | Апдейт Яндекс ИКС 27 марта 2020
17:09 Нужно поменять сертификат безопасности с http на https
15:06 Plerdy - маркетинг онлайн-платформа с помощью которой вы точно улучшите UX, SEO и увеличите конверсию сайта
02:13 Быстрое продвижение сайта в ТОП Яндекса. Рост трафика и позиций.
01:44 одинаковые H2 на разных страницах сайта

20:25 Продам банковский сайт (6 лет, кредиты, займы, кредитные карты)
19:06 Human Emulator. Автоматизация действий пользователя в браузере.
17:37 Прогон по личной базе, больше 1000 трастовых сайтов! Продвижение СЧ и НЧ запросов + рост показателей! Гарантии!
16:51 BestChange – обменивать электронную валюту можно быстро и выгодно
16:48 Ищем партнеров (сотрудничество с веб-студией)
15:45 Антидетект браузер GoLoginApp. Бесплатные прокси.
15:43 Вечные ссылки с ТОПОВЫХ ресурсов! Размещение вечных трастовых ссылок с тИЦ от + 1000 до +45000

07:39 Конкурс статей XRumer 2020
18:35 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу.
18:04 Ваш сайт блокируют гос органы? Есть решение!
19:03 Что с трафиком?
15:19 Новостной сайт с ноля
08:45 Вопрос о курсах
18:19 Plussy - лучшая партнерка для гемблинг

27.11.2019 16:48	нужен грамотный юрист\адвокат по вопросу авторских прав, индексации.
10.12.2017 14:45	Закрыть от индексации аватарки
07.03.2017 12:11	Скрытие ссылок от индексации в DLE
13.06.2016 12:07	Закрываем от индексации "мусор"
29.01.2016 20:43	Скрытие ссылки для конкретного user-agent