Дубли в выдаче.Настройка роботс

Пример выдачи

http://domen.ru/files/freedle/9-pravilnyy-robotstxt-dlya-dle.html
http://domen.ru/files/freedle/9-pravilnyy-robotstxt-dlya-dle.html?utm_source=twitterfeed&utm_medium=twitter

Добавляются в выдачу страницы с окончанием

Мой роботс

Код

User-agent: *
Disallow: /*?utm_source=twitterfeed&utm_medium=twitter
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /*print
Disallow: /user/
Disallow: /tags/
Disallow: /page/
Disallow: /2012/
Disallow: /2013/
Disallow: /backup/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /newposts/
Disallow: /favorites/
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword 
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=lastcomments
Disallow: /index.php?subaction=newposts
Disallow: /statistics.html
Disallow: /addnews.html
Sitemap: http://адрес.ru/sitemap.xml 
Host: адрес.ru

Как быть?

Новые темы	Объявления	Свободное общение
05:02 AI под надзором. Минцифры готовят клеймо для контента 23:53 Выбор CMS для первого блога в 2026 - реально ли новичку войти без кода? 22:30 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика 22:21 Слипание слов в блоке 22:13 Гугл запустил Первый АПдейт года и серп уже трясёт - Google March 2026 Core Update 22:05 С чего сейчас проще начать? 21:57 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов?	00:05 TETChange-Обменник криптовалют 22:39 Создам под вашу нишу сетку сайтов-сателлитов для привлечения целевого трафика 22:17 Продам домен translated.ru 21:00 Portfel.cc - современный помощник в Ваших финансовых операциях. 19:29 Proxy SOCKS5/HTTP(S) : Резидентские-$1.5/GB \| Мобильные-$2/GB \| Datacenter-$1/GB \| PREMIUM-$4 /GB 15:05 Mixmasters - Exchange without AML and KYC 13:11 SpeedyIndex - ускорение индексирования ссылок в Google. 100 ссылок в подарок.	23:08 Голландцы влепили Grok по яйцам - теперь нельзя раздевать реальных людей, штраф 100к евро в день 18:49 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 17:05 Огородники 13:41 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 13:02 С юмором по жизни! 05:10 Точные прогнозы на футбол 16:47 Какой фильм вы любите посмотреть перед сном?

Новые темы

Объявления

Свободное общение

05:02 AI под надзором. Минцифры готовят клеймо для контента
23:53 Выбор CMS для первого блога в 2026 - реально ли новичку войти без кода?
22:30 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика
22:21 Слипание слов в блоке
22:13 Гугл запустил Первый АПдейт года и серп уже трясёт - Google March 2026 Core Update
22:05 С чего сейчас проще начать?
21:57 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов?

00:05 TETChange-Обменник криптовалют
22:39 Создам под вашу нишу сетку сайтов-сателлитов для привлечения целевого трафика
22:17 Продам домен translated.ru
21:00 Portfel.cc - современный помощник в Ваших финансовых операциях.
19:29 Proxy SOCKS5/HTTP(S) : Резидентские-$1.5/GB | Мобильные-$2/GB | Datacenter-$1/GB | PREMIUM-$4 /GB
15:05 Mixmasters - Exchange without AML and KYC
13:11 SpeedyIndex - ускорение индексирования ссылок в Google. 100 ссылок в подарок.

23:08 Голландцы влепили Grok по яйцам - теперь нельзя раздевать реальных людей, штраф 100к евро в день
18:49 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила
17:05 Огородники
13:41 8 марта: желаю аптайма 99.9% и e-e-a-t без локов
13:02 С юмором по жизни!
05:10 Точные прогнозы на футбол
16:47 Какой фильм вы любите посмотреть перед сном?

26.11.2018 15:33	Дубли страниц с точкой и без
21.12.2016 09:56	Почему дублируются страницы?
22.10.2016 20:53	Дубли
18.04.2016 12:53	301 редирект и дубли
19.03.2016 15:06	Дублирование страниц - как исправить

mandy great Сообщений: 39 Регистрация: Апр 2011	#3 5 Марта 2012 19:35 У меня такая же проблема была с Яндексом. Прописала запрет в роботс и все. Ждите, скоро яндекс ненужное выкинет и больше индексировать такого рода ссылки не будет.