Дубли в выдаче.

Сообщений: 595 Регистрация: Окт 2011

3 Марта 2012 10:44

Ну не пойму я как запретить к индексации эту примочку:
?utm_source=twitterfeed&utm_medium=twitter

Ведь страниц куча:
http ://site.ru/news/777-chpu.html?utm_source=twitterfeed&utm_medium=twitter
http ://site.ru/news/778-chpu.html?utm_source=twitterfeed&utm_medium=twitter
http ://site.ru/news/779-chpu.html?utm_source=twitterfeed&utm_medium=twitter
http ://site.ru/news/780-chpu.html?utm_source=twitterfeed&utm_medium=twitter

[FONT=verdana, arial, sans-serif]В роботс вроде все правильно забил, однако Яшка кидает в выдачу дубли....[/FONT]

robots.txt

Код

User-agent: *
Disallow: /*?utm_source=twitterfeed&utm_medium=twitter
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /*print
Disallow: /user/
Disallow: /tags/
Disallow: /page/
Disallow: /2012/
Disallow: /2013/
Disallow: /backup/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /newposts/
Disallow: /favorites/
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword 
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?do=lastcomments
Disallow: /index.php?subaction=newposts
Disallow: /statistics.html
Disallow: /addnews.html
Sitemap: http://web-unlims.ru/sitemap.xml 
Host: web-unlims.ru

Что посоветуете?

ru-RU

Сообщений: 24 Регистрация: Фев 2012

5 Марта 2012 00:44

можно попробовать так:

Disallow: *?utm_source=twitterfeed&utm_medium=twitter*

вы в ЯВМ проверяете как яндекс в разделе роботс реагирует на запрещённые страницы?

MAGUR

Сообщений: 120 Регистрация: Окт 2010

11 Марта 2012 10:48

Не чего страшного в ?utm_source=twitterfeed&utm_medium=twitter нет, данный "хвост" появляется если ссылка была найдена с помощью твиттера, такие ссылки вылетают из основной выдачи т.к находятся во временной выдачи и были проиндексированный быстророботом

Марьян Пильчак

Сообщений: 7396 Регистрация: Окт 2011

11 Марта 2012 11:40

Если есть что-то одно, что постоянно присутствует - например " twitter " [FONT=Tahoma, Arial, Helvetica, sans-serif]То сделайте так[/FONT]
[FONT=Tahoma, Arial, Helvetica, sans-serif]Dissalow: \*[/FONT]twitter

Оптимизация сайтов - Заказать!
У тебя пропали позиции? Сайт в АГС? Нету посещений? Позиции калл? Пиши мне!

SheFF7

Сообщений: 17 Регистрация: Янв 2012

2 Июля 2012 23:44

вставьте в .htaccess сразу после строки
RewriteEngine On

Код
RewriteCond %{ENV:REDIRECT_RWR} ^yes$ RewriteRule .* - [L] RewriteCond %{QUERY_STRING} ^utm_source RewriteRule ^.*$ %{HTTP_HOST}/$0? [R=301,L,E=RWR:yes]

4ksner

Сообщений: 1 Регистрация: Янв 2011

21 Февраля 2013 22:34

Цитата

SheFF7 пишет:
вставьте в .htaccess сразу после строки
RewriteEngine On

Код
RewriteCond %{ENV:REDIRECT_RWR} ^yes$ RewriteRule .* - [L] RewriteCond %{QUERY_STRING} ^utm_source RewriteRule ^.*$ %{HTTP_HOST}/$0? [R=301,L,E=RWR:yes]

У меня данный код работает не корректно. А с этим нормально:

Код
RewriteCond %{ENV:REDIRECT_RWR} ^yes$ RewriteRule .* - [L] RewriteCond %{QUERY_STRING} ^utm_source RewriteRule ^.*$ %{HTTP_HOST}/$0? [R=301,L,E=RWR:yes]

Mrazish

Сообщений: 99 Регистрация: Мар 2013

26 Марта 2013 03:37

Тс, ваша проблема решена?

Антон Усов

Сообщений: 1305 Регистрация: Май 2012

9 Октября 2013 13:17

У меня такая же проблема с дублями. Есть ли смысл их закрывать или в этом нет ничего страшного?

Лучшая биржа контента

Антон Усов Сообщений: 1305 Регистрация: Май 2012	#9 9 Октября 2013 13:18 Замечал, что такой "хвост" пропадает когда страница появляется в основном индексе. Но возможно это замедляет индексацию?

Новые темы	Объявления	Свободное общение
22:27 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 12:39 2Index - быстрая индексация страниц сайта и обратных ссылок 06:17 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам). 23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 21:20 Rotapost прикрыли! Чем пользоваться? 00:23 Раскрутка форума	20:33 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 16:17 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 13:51 Скрипт обменника валют 07:11 Купить отзывы на Яндекс и Гугл картах, на Авито, на Отзовике и IRecommend 04:10 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 13:51 CryptoMonitor.info - ваш надеждный обменник BTC USDT XMR (без KYC) 13:16 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old	10:29 С юмором по жизни! 16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты?

Новые темы

Объявления

Свободное общение

22:27 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
12:39 2Index - быстрая индексация страниц сайта и обратных ссылок
06:17 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг
11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам).
23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
21:20 Rotapost прикрыли! Чем пользоваться?
00:23 Раскрутка форума

20:33 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
16:17 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
13:51 Скрипт обменника валют
07:11 Купить отзывы на Яндекс и Гугл картах, на Авито, на Отзовике и IRecommend
04:10 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
13:51 CryptoMonitor.info - ваш надеждный обменник BTC USDT XMR (без KYC)
13:16 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old

10:29 С юмором по жизни!
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру
20:43 Добро пожаловать в цифровой мир...
15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь
22:55 Ну что, кто куда деваете свои сайты?

09.09.2025 09:18	Влияние использования ИИ для написания текстов на позицию в поисковой выдаче
19.09.2021 13:50	Сайт в выдаче после бана РКН
06.07.2021 15:04	Вопрос по дубликатам страницы?
31.01.2021 02:27	После перехода на Https сайт отлетел далеко в выдаче яндекс!
21.01.2021 10:59	Как убрать дублирование главной