Как правильно запретить индексацию в robots.txt

Сообщений: 600 Регистрация: Июл 2011

17 Мая 2013 12:57

Доброго дня! Как правильно запретить индексацию дублей, на сайте есть страницы site.ru/zayavka-na-kredit-onlajn.html и site.ru/zayavka-na-kredit-onlajn.html?tags=%D0%BE%D0%BD%D0%BB%D0%B0%D0%B9%D0%BD+%D0%BA%D1%80%D0%B5%D0%B4%D0%B8%D1%82%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5 - то есть дубли, и таких много. Как правильно прописать в роботсе запрет на индекс дублей?

Лучший хостинг для Вашего сайта! Пользуюсь около 10 лет!

Dima Carpin

Сообщений: 78 Регистрация: Янв 2013

17 Мая 2013 13:13

Цитата

Денис Хайретдинов пишет:
Доброго дня! Как правильно запретить индексацию дублей, на сайте есть страницы site.ru/zayavka-na-kredit-onlajn.html и site.ru/zayavka-na-kredit-onlajn.html?tags=%D0%BE%D0%BD%D0%BB%D0%B0% D0%B9%D0%BD+%D0%BA%D1%80%D0%B5 %D0%B4%D0%B8%D1%82%D0%BE%D0%B2 %D0%B0%D0%BD%D0%B8%D0%B5 - то есть дубли, и таких много. Как правильно прописать в роботсе запрет на индекс дублей?
/tags это закрывайте, или отключайте облоко тэгов, движёк какой? не вордпресс случаем? icq 601603644 skype:sercarp1

Dima Carpin

Сообщений: 78 Регистрация: Янв 2013

17 Мая 2013 13:13

/tags это закрывайте, или отключайте облоко тэгов, движёк какой? не вордпресс случаем? icq 601603644 skype:sercarp1

Денис Хайретдинов

Сообщений: 600 Регистрация: Июл 2011

17 Мая 2013 13:33

Нет, modx. Теги уже давно отключены, а дубли все мотаются. То есть, так

Disallow: /tags или Disallow: ?tags ?

Mishelin

Сообщений: 59 Регистрация: Сен 2011

22 Июня 2013 17:43

И чё вам дубли.
Если это wordpress то он их клонирует пачками.
Уже давно не заморачиваюсь.
Яндекс и гугль давно дубли сами отсеивают, остальное отправляют в "сопли".

P.S.
если хочется повозится то добавляйте к основной статье тег rel=»canonical»

Код
<link rel='canonical' href=http://site.ru/osnovnaya_statiya.html' />

А для поклонников вордпресса есть куча плагинов например:

All in One Seo Pack
Platinum SEO Pack

для Drupal — модуль Nodewords
для Joomla — модуль Canonical URL;

зарабатываю здесь
Вывод Webmoney

Dzmitry Сообщений: 171 Регистрация: Июл 2012	#6 22 Июня 2013 18:12 Это Гугл их отсеивает, а от Яндекса если мало контента и куча дублей можно и под АГС попасть!

Новые темы	Объявления	Свободное общение
20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 18:53 Кнопки "скрыть" и "пожаловаться" в рекламе яндекса 15:29 OpenAI и шейхи: Цензура на продажу и "гибкие" идеалы амеров 13:26 Как безопасно купить Гугл почту? 10:59 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу	18:41 Веривикация Авито 17:37 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 16:31 JustProxy.Biz - Резидентные прокси без ограничения по трафику 15:39 Создам под вашу нишу сетку сайтов-сателлитов для привлечения целевого трафика 15:31 Вериф аккаунты АВИТО + платежи 08:58 Мониторинг обменников Сrypto-scout.io 04:09 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка	19:56 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 19:29 FIFA и Assassin’s Creed воруют пароли: В репаки зашили лютый стиллер. Чекаем логи 19:24 Туалетные секреты: Замурчательная тема 19:15 Сайты Рунета 15:15 ИИ-театр для инвесторов: почему виральные посты в Moltbook писали люди и в чем подвох OpenClaw 08:50 Гильотина для классиков: Клод доедает физические книги 05:10 Точные прогнозы на футбол

Новые темы

Объявления

Свободное общение

20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией?
20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках
20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?
18:53 Кнопки "скрыть" и "пожаловаться" в рекламе яндекса
15:29 OpenAI и шейхи: Цензура на продажу и "гибкие" идеалы амеров
13:26 Как безопасно купить Гугл почту?
10:59 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу

18:41 Веривикация Авито
17:37 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
16:31 JustProxy.Biz - Резидентные прокси без ограничения по трафику
15:39 Создам под вашу нишу сетку сайтов-сателлитов для привлечения целевого трафика
15:31 Вериф аккаунты АВИТО + платежи
08:58 Мониторинг обменников Сrypto-scout.io
04:09 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка

19:56 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе
19:29 FIFA и Assassin’s Creed воруют пароли: В репаки зашили лютый стиллер. Чекаем логи
19:24 Туалетные секреты: Замурчательная тема
19:15 Сайты Рунета
15:15 ИИ-театр для инвесторов: почему виральные посты в Moltbook писали люди и в чем подвох OpenClaw
08:50 Гильотина для классиков: Клод доедает физические книги
05:10 Точные прогнозы на футбол

23.09.2023 11:44	Правильно ли сделано на сайте?
27.12.2022 15:45	Как правильно перенести статьи на сайт из другого сайта
17.05.2021 17:21	Как правильно сделать seo-анализ сайта?
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
05.12.2020 10:20	Как правильно перенести сайт на международный домен?