Как правильно запретить индексацию в robots.txt

Сообщений: 600 Регистрация: Июл 2011

17 Мая 2013 12:57

Доброго дня! Как правильно запретить индексацию дублей, на сайте есть страницы site.ru/zayavka-na-kredit-onlajn.html и site.ru/zayavka-na-kredit-onlajn.html?tags=%D0%BE%D0%BD%D0%BB%D0%B0%D0%B9%D0%BD+%D0%BA%D1%80%D0%B5%D0%B4%D0%B8%D1%82%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5 - то есть дубли, и таких много. Как правильно прописать в роботсе запрет на индекс дублей?

Лучший хостинг для Вашего сайта! Пользуюсь около 10 лет!

Dima Carpin

Сообщений: 78 Регистрация: Янв 2013

17 Мая 2013 13:13

Цитата

Денис Хайретдинов пишет:
Доброго дня! Как правильно запретить индексацию дублей, на сайте есть страницы site.ru/zayavka-na-kredit-onlajn.html и site.ru/zayavka-na-kredit-onlajn.html?tags=%D0%BE%D0%BD%D0%BB%D0%B0% D0%B9%D0%BD+%D0%BA%D1%80%D0%B5 %D0%B4%D0%B8%D1%82%D0%BE%D0%B2 %D0%B0%D0%BD%D0%B8%D0%B5 - то есть дубли, и таких много. Как правильно прописать в роботсе запрет на индекс дублей?
/tags это закрывайте, или отключайте облоко тэгов, движёк какой? не вордпресс случаем? icq 601603644 skype:sercarp1

Dima Carpin

Сообщений: 78 Регистрация: Янв 2013

17 Мая 2013 13:13

/tags это закрывайте, или отключайте облоко тэгов, движёк какой? не вордпресс случаем? icq 601603644 skype:sercarp1

Денис Хайретдинов

Сообщений: 600 Регистрация: Июл 2011

17 Мая 2013 13:33

Нет, modx. Теги уже давно отключены, а дубли все мотаются. То есть, так

Disallow: /tags или Disallow: ?tags ?

Mishelin

Сообщений: 59 Регистрация: Сен 2011

22 Июня 2013 17:43

И чё вам дубли.
Если это wordpress то он их клонирует пачками.
Уже давно не заморачиваюсь.
Яндекс и гугль давно дубли сами отсеивают, остальное отправляют в "сопли".

P.S.
если хочется повозится то добавляйте к основной статье тег rel=»canonical»

Код
<link rel='canonical' href=http://site.ru/osnovnaya_statiya.html' />

А для поклонников вордпресса есть куча плагинов например:

All in One Seo Pack
Platinum SEO Pack

для Drupal — модуль Nodewords
для Joomla — модуль Canonical URL;

зарабатываю здесь
Вывод Webmoney

Dzmitry Сообщений: 171 Регистрация: Июл 2012	#6 22 Июня 2013 18:12 Это Гугл их отсеивает, а от Яндекса если мало контента и куча дублей можно и под АГС попасть!

Новые темы	Объявления	Свободное общение
10:02 Бесплатное получение бэклинков 10:01 Бесплатное расширение для Chrome — проверка ссылок прямо на странице 23:53 Выбор CMS для первого блога в 2026 - реально ли новичку войти без кода? 22:30 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика 22:21 Слипание слов в блоке 22:13 Гугл запустил Первый АПдейт года и серп уже трясёт - Google March 2026 Core Update 22:05 С чего сейчас проще начать?	09:40 Вериф аккаунты АВИТО + платежи 09:22 Софт для рассылки в телеграм 09:16 Telegram-бот конструктор: автоответы, воронки, поддержка и т.д 00:05 TETChange-Обменник криптовалют 22:39 Создам под вашу нишу сетку сайтов-сателлитов для привлечения целевого трафика 22:17 Продам домен translated.ru 21:00 Portfel.cc - современный помощник в Ваших финансовых операциях.	23:08 Голландцы влепили Grok по яйцам - теперь нельзя раздевать реальных людей, штраф 100к евро в день 18:49 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 17:05 Огородники 13:41 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 13:02 С юмором по жизни! 05:10 Точные прогнозы на футбол 16:47 Какой фильм вы любите посмотреть перед сном?

Новые темы

Объявления

Свободное общение

10:02 Бесплатное получение бэклинков
10:01 Бесплатное расширение для Chrome — проверка ссылок прямо на странице
23:53 Выбор CMS для первого блога в 2026 - реально ли новичку войти без кода?
22:30 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика
22:21 Слипание слов в блоке
22:13 Гугл запустил Первый АПдейт года и серп уже трясёт - Google March 2026 Core Update
22:05 С чего сейчас проще начать?

09:40 Вериф аккаунты АВИТО + платежи
09:22 Софт для рассылки в телеграм
09:16 Telegram-бот конструктор: автоответы, воронки, поддержка и т.д
00:05 TETChange-Обменник криптовалют
22:39 Создам под вашу нишу сетку сайтов-сателлитов для привлечения целевого трафика
22:17 Продам домен translated.ru
21:00 Portfel.cc - современный помощник в Ваших финансовых операциях.

23:08 Голландцы влепили Grok по яйцам - теперь нельзя раздевать реальных людей, штраф 100к евро в день
18:49 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила
17:05 Огородники
13:41 8 марта: желаю аптайма 99.9% и e-e-a-t без локов
13:02 С юмором по жизни!
05:10 Точные прогнозы на футбол
16:47 Какой фильм вы любите посмотреть перед сном?

23.09.2023 11:44	Правильно ли сделано на сайте?
27.12.2022 15:45	Как правильно перенести статьи на сайт из другого сайта
17.05.2021 17:21	Как правильно сделать seo-анализ сайта?
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
05.12.2020 10:20	Как правильно перенести сайт на международный домен?