Как правильно запретить индексацию в robots.txt

Сообщений: 600 Регистрация: Июл 2011

17 Мая 2013 12:57

Доброго дня! Как правильно запретить индексацию дублей, на сайте есть страницы site.ru/zayavka-na-kredit-onlajn.html и site.ru/zayavka-na-kredit-onlajn.html?tags=%D0%BE%D0%BD%D0%BB%D0%B0%D0%B9%D0%BD+%D0%BA%D1%80%D0%B5%D0%B4%D0%B8%D1%82%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5 - то есть дубли, и таких много. Как правильно прописать в роботсе запрет на индекс дублей?

Лучший хостинг для Вашего сайта! Пользуюсь около 10 лет!

Dima Carpin

Сообщений: 78 Регистрация: Янв 2013

17 Мая 2013 13:13

Цитата

Денис Хайретдинов пишет:
Доброго дня! Как правильно запретить индексацию дублей, на сайте есть страницы site.ru/zayavka-na-kredit-onlajn.html и site.ru/zayavka-na-kredit-onlajn.html?tags=%D0%BE%D0%BD%D0%BB%D0%B0% D0%B9%D0%BD+%D0%BA%D1%80%D0%B5 %D0%B4%D0%B8%D1%82%D0%BE%D0%B2 %D0%B0%D0%BD%D0%B8%D0%B5 - то есть дубли, и таких много. Как правильно прописать в роботсе запрет на индекс дублей?
/tags это закрывайте, или отключайте облоко тэгов, движёк какой? не вордпресс случаем? icq 601603644 skype:sercarp1

Dima Carpin

Сообщений: 78 Регистрация: Янв 2013

17 Мая 2013 13:13

/tags это закрывайте, или отключайте облоко тэгов, движёк какой? не вордпресс случаем? icq 601603644 skype:sercarp1

Денис Хайретдинов

Сообщений: 600 Регистрация: Июл 2011

17 Мая 2013 13:33

Нет, modx. Теги уже давно отключены, а дубли все мотаются. То есть, так

Disallow: /tags или Disallow: ?tags ?

Mishelin

Сообщений: 59 Регистрация: Сен 2011

22 Июня 2013 17:43

И чё вам дубли.
Если это wordpress то он их клонирует пачками.
Уже давно не заморачиваюсь.
Яндекс и гугль давно дубли сами отсеивают, остальное отправляют в "сопли".

P.S.
если хочется повозится то добавляйте к основной статье тег rel=»canonical»

Код
<link rel='canonical' href=http://site.ru/osnovnaya_statiya.html' />

А для поклонников вордпресса есть куча плагинов например:

All in One Seo Pack
Platinum SEO Pack

для Drupal — модуль Nodewords
для Joomla — модуль Canonical URL;

зарабатываю здесь
Вывод Webmoney

Dzmitry Сообщений: 171 Регистрация: Июл 2012	#6 22 Июня 2013 18:12 Это Гугл их отсеивает, а от Яндекса если мало контента и куча дублей можно и под АГС попасть!

Новые темы	Объявления	Свободное общение
22:27 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 12:39 2Index - быстрая индексация страниц сайта и обратных ссылок 06:17 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам). 23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 21:20 Rotapost прикрыли! Чем пользоваться? 00:23 Раскрутка форума	11:41 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 11:03 SellBuycoin.io - надежный проводник в мир обмена криптовалют на фиат и наличные по РФ! 09:03 HH.ru Работадателя вериф 06:49 №1 Рассылка / Инвайтинг [TELEGRAM] \| Приватный метод 06:49 Trustpilot Reviews \| Подниму рейтинг вашей компании 06:47 Продвижение YouTube видео в топ поиска \| Любой тип контента \| Гарантия результата 06:47 Установка\|Настройка\|Доработка\|Наполнение сайтов\|Дизайн\|3D\|Видеомонтаж	13:08 Бесплатный майнинг Tether (USDT) 10:29 С юмором по жизни! 16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь

Новые темы

Объявления

Свободное общение

22:27 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
12:39 2Index - быстрая индексация страниц сайта и обратных ссылок
06:17 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг
11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам).
23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
21:20 Rotapost прикрыли! Чем пользоваться?
00:23 Раскрутка форума

13:08 Бесплатный майнинг Tether (USDT)
10:29 С юмором по жизни!
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру
20:43 Добро пожаловать в цифровой мир...
15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь

23.09.2023 11:44	Правильно ли сделано на сайте?
27.12.2022 15:45	Как правильно перенести статьи на сайт из другого сайта
17.05.2021 17:21	Как правильно сделать seo-анализ сайта?
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
05.12.2020 10:20	Как правильно перенести сайт на международный домен?