Дубли в выдаче.Настройка роботс

Пример выдачи

http://domen.ru/files/freedle/9-pravilnyy-robotstxt-dlya-dle.html
http://domen.ru/files/freedle/9-pravilnyy-robotstxt-dlya-dle.html?utm_source=twitterfeed&utm_medium=twitter

Добавляются в выдачу страницы с окончанием

Мой роботс

Код

User-agent: *
Disallow: /*?utm_source=twitterfeed&utm_medium=twitter
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /*print
Disallow: /user/
Disallow: /tags/
Disallow: /page/
Disallow: /2012/
Disallow: /2013/
Disallow: /backup/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /newposts/
Disallow: /favorites/
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword 
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=lastcomments
Disallow: /index.php?subaction=newposts
Disallow: /statistics.html
Disallow: /addnews.html
Sitemap: http://адрес.ru/sitemap.xml 
Host: адрес.ru

Как быть?

Новые темы	Объявления	Свободное общение
15:15 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 09:21 SEO под нейро 08:53 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 07:07 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026 23:39 Rotapost прикрыли! Чем пользоваться? 10:35 Как Яндекс индексирует ваш сайт? \| АПдейт выдача 8.12.2025 11:11 Операторы поиска Яндекса: FAQ для тех, кто хочет стать мастером поиска	16:34 Сервис смс активаций и аренды мобильных номеров ALISMS 15:26 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 14:28 Размещу ссылки/статьи на ваш сайт \| Рост ИКС \| XRumer 23.0.4 StrongAI 11:32 Продажа аккаунтов HH.RU 04:24 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 00:14 xpoint.pro - быстрый и надежный криптообменный сервис Xpoint 23:42 SnapSwap.io — быстрый анонимный crypto-to-crypto обмен без регистрации	16:38 NOVA Маркетплейс 08:12 Компьютерная мышь 07:14 Про мясо 22:20 Точные прогнозы на футбол 23:08 С юмором по жизни! 13:08 Бесплатный майнинг Tether (USDT) 16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру

Новые темы

Объявления

Свободное общение

15:15 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
09:21 SEO под нейро
08:53 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов
07:07 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026
23:39 Rotapost прикрыли! Чем пользоваться?
10:35 Как Яндекс индексирует ваш сайт? | АПдейт выдача 8.12.2025
11:11 Операторы поиска Яндекса: FAQ для тех, кто хочет стать мастером поиска

16:34 Сервис смс активаций и аренды мобильных номеров ALISMS
15:26 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
14:28 Размещу ссылки/статьи на ваш сайт | Рост ИКС | XRumer 23.0.4 StrongAI
11:32 Продажа аккаунтов HH.RU
04:24 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
00:14 xpoint.pro - быстрый и надежный криптообменный сервис Xpoint
23:42 SnapSwap.io — быстрый анонимный crypto-to-crypto обмен без регистрации

16:38 NOVA Маркетплейс
08:12 Компьютерная мышь
07:14 Про мясо
22:20 Точные прогнозы на футбол
23:08 С юмором по жизни!
13:08 Бесплатный майнинг Tether (USDT)
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру

26.11.2018 15:33	Дубли страниц с точкой и без
21.12.2016 09:56	Почему дублируются страницы?
22.10.2016 20:53	Дубли
18.04.2016 12:53	301 редирект и дубли
19.03.2016 15:06	Дублирование страниц - как исправить

mandy great Сообщений: 39 Регистрация: Апр 2011	#3 5 Марта 2012 19:35 У меня такая же проблема была с Яндексом. Прописала запрет в роботс и все. Ждите, скоро яндекс ненужное выкинет и больше индексировать такого рода ссылки не будет.