Дубли в выдаче.Настройка роботс

Пример выдачи

http://domen.ru/files/freedle/9-pravilnyy-robotstxt-dlya-dle.html
http://domen.ru/files/freedle/9-pravilnyy-robotstxt-dlya-dle.html?utm_source=twitterfeed&utm_medium=twitter

Добавляются в выдачу страницы с окончанием

Мой роботс

Код

User-agent: *
Disallow: /*?utm_source=twitterfeed&utm_medium=twitter
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /*print
Disallow: /user/
Disallow: /tags/
Disallow: /page/
Disallow: /2012/
Disallow: /2013/
Disallow: /backup/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /newposts/
Disallow: /favorites/
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword 
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=lastcomments
Disallow: /index.php?subaction=newposts
Disallow: /statistics.html
Disallow: /addnews.html
Sitemap: http://адрес.ru/sitemap.xml 
Host: адрес.ru

Как быть?

Новые темы	Объявления	Свободное общение
18:41 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 16:38 Стоит ли добавлять сайт в Rambler топ 100? 17:26 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 09:56 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 12:59 2Index - быстрая индексация страниц сайта и обратных ссылок 10:13 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 23:00 Продвижение по ключам	20:10 Продвижение сайтов в ТОП Яндекса за 2 недели. Рост позиций и трафика. Бесплатный тест. 17:31 GoodsMoney.io 16:59 SellBuycoin.io - надежный проводник в мир обмена криптовалют на фиат и наличные по РФ! 15:32 Q3.Network: 1500+ гемблинг-офферов, нестандартные источники трафика, свои приложения 12:57 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 04:09 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 18:51 SOCKS5 приватные прокси на 30 дней для PayPal	15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники? 22:26 Какой фильм посмотреть сегодня вечером? 17:13 Добро пожаловать в цифровой мир...

Новые темы

Объявления

Свободное общение

18:41 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
16:38 Стоит ли добавлять сайт в Rambler топ 100?
17:26 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
09:56 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг
12:59 2Index - быстрая индексация страниц сайта и обратных ссылок
10:13 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
23:00 Продвижение по ключам

20:10 Продвижение сайтов в ТОП Яндекса за 2 недели. Рост позиций и трафика. Бесплатный тест.
17:31 GoodsMoney.io
16:59 SellBuycoin.io - надежный проводник в мир обмена криптовалют на фиат и наличные по РФ!
15:32 Q3.Network: 1500+ гемблинг-офферов, нестандартные источники трафика, свои приложения
12:57 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру)
04:09 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
18:51 SOCKS5 приватные прокси на 30 дней для PayPal

15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь
22:55 Ну что, кто куда деваете свои сайты?
22:34 Используете беспроводные наушники?
22:26 Какой фильм посмотреть сегодня вечером?
17:13 Добро пожаловать в цифровой мир...

26.11.2018 15:33	Дубли страниц с точкой и без
21.12.2016 09:56	Почему дублируются страницы?
22.10.2016 20:53	Дубли
18.04.2016 12:53	301 редирект и дубли
19.03.2016 15:06	Дублирование страниц - как исправить

mandy great Сообщений: 39 Регистрация: Апр 2011	#3 5 Марта 2012 19:35 У меня такая же проблема была с Яндексом. Прописала запрет в роботс и все. Ждите, скоро яндекс ненужное выкинет и больше индексировать такого рода ссылки не будет.