Дубли в выдаче.

Сообщений: 595 Регистрация: Окт 2011

3 Марта 2012 10:44

Ну не пойму я как запретить к индексации эту примочку:
?utm_source=twitterfeed&utm_medium=twitter

Ведь страниц куча:
http ://site.ru/news/777-chpu.html?utm_source=twitterfeed&utm_medium=twitter
http ://site.ru/news/778-chpu.html?utm_source=twitterfeed&utm_medium=twitter
http ://site.ru/news/779-chpu.html?utm_source=twitterfeed&utm_medium=twitter
http ://site.ru/news/780-chpu.html?utm_source=twitterfeed&utm_medium=twitter

[FONT=verdana, arial, sans-serif]В роботс вроде все правильно забил, однако Яшка кидает в выдачу дубли....[/FONT]

robots.txt

Код

User-agent: *
Disallow: /*?utm_source=twitterfeed&utm_medium=twitter
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /*print
Disallow: /user/
Disallow: /tags/
Disallow: /page/
Disallow: /2012/
Disallow: /2013/
Disallow: /backup/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /newposts/
Disallow: /favorites/
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword 
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=lastcomments
Disallow: /index.php?subaction=newposts
Disallow: /statistics.html
Disallow: /addnews.html
Sitemap: http://web-unlims.ru/sitemap.xml 
Host: web-unlims.ru

Что посоветуете?

ru-RU

Сообщений: 24 Регистрация: Фев 2012

5 Марта 2012 00:44

можно попробовать так:

Disallow: *?utm_source=twitterfeed&utm_medium=twitter*

вы в ЯВМ проверяете как яндекс в разделе роботс реагирует на запрещённые страницы?

MAGUR

Сообщений: 120 Регистрация: Окт 2010

11 Марта 2012 10:48

Не чего страшного в ?utm_source=twitterfeed&utm_medium=twitter нет, данный "хвост" появляется если ссылка была найдена с помощью твиттера, такие ссылки вылетают из основной выдачи т.к находятся во временной выдачи и были проиндексированный быстророботом

Марьян Пильчак

Сообщений: 7396 Регистрация: Окт 2011

11 Марта 2012 11:40

Если есть что-то одно, что постоянно присутствует - например " twitter " [FONT=Tahoma, Arial, Helvetica, sans-serif]То сделайте так[/FONT]
[FONT=Tahoma, Arial, Helvetica, sans-serif]Dissalow: \*[/FONT]twitter

Оптимизация сайтов - Заказать!
У тебя пропали позиции? Сайт в АГС? Нету посещений? Позиции калл? Пиши мне!

SheFF7

Сообщений: 17 Регистрация: Янв 2012

2 Июля 2012 23:44

вставьте в .htaccess сразу после строки
RewriteEngine On

Код
RewriteCond %{ENV:REDIRECT_RWR} ^yes$ RewriteRule .* - [L] RewriteCond %{QUERY_STRING} ^utm_source RewriteRule ^.*$ %{HTTP_HOST}/$0? [R=301,L,E=RWR:yes]

4ksner

Сообщений: 1 Регистрация: Янв 2011

21 Февраля 2013 22:34

Цитата

SheFF7 пишет:
вставьте в .htaccess сразу после строки
RewriteEngine On

Код
RewriteCond %{ENV:REDIRECT_RWR} ^yes$ RewriteRule .* - [L] RewriteCond %{QUERY_STRING} ^utm_source RewriteRule ^.*$ %{HTTP_HOST}/$0? [R=301,L,E=RWR:yes]

У меня данный код работает не корректно. А с этим нормально:

Код
RewriteCond %{ENV:REDIRECT_RWR} ^yes$ RewriteRule .* - [L] RewriteCond %{QUERY_STRING} ^utm_source RewriteRule ^.*$ %{HTTP_HOST}/$0? [R=301,L,E=RWR:yes]

Mrazish

Сообщений: 99 Регистрация: Мар 2013

26 Марта 2013 03:37

Тс, ваша проблема решена?

Антон Усов

Сообщений: 1305 Регистрация: Май 2012

9 Октября 2013 13:17

У меня такая же проблема с дублями. Есть ли смысл их закрывать или в этом нет ничего страшного?

Лучшая биржа контента

Антон Усов Сообщений: 1305 Регистрация: Май 2012	#9 9 Октября 2013 13:18 Замечал, что такой "хвост" пропадает когда страница появляется в основном индексе. Но возможно это замедляет индексацию?

Новые темы	Объявления	Свободное общение
16:04 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 11:48 Google - шантажист, а Cloudflare - не спаситель. Как не отлететь в бан 11:47 Старые кости или свежее мясо? Как нагнуть старичка в серпе за один год 11:45 10.02 Яндекс штормит, а Google лезет в долги: 15 миллиардов на железки для ИИ 20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?	20:15 Nexulume.com Обменник без AML и KYC 17:47 Продажа аккаунтов HH.RU 17:06 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 16:53 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 12:59 Mixmasters - Exchange without AML and KYC 09:05 Swapwatch.org — Мониторинг криптовалютных обменников 08:45 GhostRocket.pro — Взлетаем в новую эру криптообмена!	23:25 Точные прогнозы на футбол 21:50 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 21:25 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 20:54 Туалетные секреты: Замурчательная тема 17:44 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 15:24 Сайты Рунета 15:22 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось?

Новые темы

Объявления

Свободное общение

16:04 LGaming - экосистема и партнерская программа в gambling и betting вертикалях
11:48 Google - шантажист, а Cloudflare - не спаситель. Как не отлететь в бан
11:47 Старые кости или свежее мясо? Как нагнуть старичка в серпе за один год
11:45 10.02 Яндекс штормит, а Google лезет в долги: 15 миллиардов на железки для ИИ
20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией?
20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках
20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?

20:15 Nexulume.com Обменник без AML и KYC
17:47 Продажа аккаунтов HH.RU
17:06 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust
16:53 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно
12:59 Mixmasters - Exchange without AML and KYC
09:05 Swapwatch.org — Мониторинг криптовалютных обменников
08:45 GhostRocket.pro — Взлетаем в новую эру криптообмена!

23:25 Точные прогнозы на футбол
21:50 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе
21:25 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео?
20:54 Туалетные секреты: Замурчательная тема
17:44 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес
15:24 Сайты Рунета
15:22 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось?

09.09.2025 09:18	Влияние использования ИИ для написания текстов на позицию в поисковой выдаче
19.09.2021 13:50	Сайт в выдаче после бана РКН
06.07.2021 15:04	Вопрос по дубликатам страницы?
31.01.2021 02:27	После перехода на Https сайт отлетел далеко в выдаче яндекс!
21.01.2021 10:59	Как убрать дублирование главной