помогите с роботс
Страницы: 1
помогите с роботс
Здравствуйте. Кто в курсе, у меня google индексирует такие страницы как    сайт/2012/02/ ;  /2012/04/13/   ну и т.д. (я так полагаю это дубли?) и под фильтром 40% хотя все уник.
как их закрыть в роботсе подскажите пожалуйста.

Вот мой роботс

User-agent: *
Disallow: /*print
Disallow: /engine/go.php
Disallow: /user/
Disallow: /tags/
Disallow: /engine/
Disallow: /favorites/
Disallow: /lastnews/
Disallow: /2012/      <-- тут думал что закрыл
Disallow: /page/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /templates/
Disallow: /filesup/
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /index.php?subaction=userinfo
Disallow: /index.php?subaction=newposts
Disallow: /index.php?do=lastcomments
Disallow: /index.php?do=feedback
Disallow: /index.php?do=register
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=addnews
Disallow: /index.php?do=stats
Disallow: /index.php?do=pm
Disallow: /index.php?do=search
Disallow: /files/links.php
Disallow: /*subaction=userinfo
Sitemap: http://собственно сам сайт/sitemap.xml
User-agent: Yandex
Host: сайт
Disallow: /2012/
Этим Вы закрываете только раздел 2012
Для того, чтобы запретить индексацию содержимого раздела, конечный слэш не нужен.
Disallow: /2012 запрет на индексацию любых файлов и директорий, которые называются или имеют в своём названии 2012
т.е. убрать слэш и дубли должны исчезнуть?
Цитата
Disallow: /2012 запрет на индексацию любых файлов и директорий, которые называются или имеют в своём названии 2012
Спасибо, попробую...
В дополнение хочется сказать, что закрыв от индексации всю директорию, может возникнуть ситуация, при которой некоторая страница должна быть в индексе. Тогда воспользуйтесь Allow: /адрес страницы. Удачи!
упаду на хвост, на DLE лучше закрывать номера страниц Disallow: /page/ или нет?
Цитата
Victorius пишет:
упаду на хвост, на DLE лучше закрывать номера страниц Disallow: /page/ или нет?
я закрываю
Цитата
Apostle пишет:
Цитата
Victorius пишет:
упаду на хвост, на DLE лучше закрывать номера страниц Disallow: /page/ или нет?
я закрываю
от них толку нет?
Мне кажется Вы не в том направлении двигаетесь.Страницы дубли надо склеить в .htaccess
Знаки зодиака гороскоп человека по дате рождения
запретите */2012/*
Не подписываюсь на темы, так что не слежу за вопросами, которые вы оставляете в топике после меня. Если нужно получить ответ, пишите в ЛС с указанием ссылки на мой комментарий.
Цитата
Андрей Теньков пишет:
Мне кажется Вы не в том направлении двигаетесь.Страницы дубли надо склеить в .htaccess
а можно по подробнее?
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
18:44 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
13:12 Покупные ссылки 
12:57 Rotapost прикрыли! Чем пользоваться? 
17:00 Стоит ли добавлять сайт в Rambler топ 100? 
15:12 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026 
15:01 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
07:24 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
20:07 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
16:31 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
15:37 Продажа лидов: форекс, инвестиции, нативка, гемблинг, чарджбеки 
14:49 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 
01:31 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 
01:07 Full-Stack Developer — Сайты и Софт любой сложности | Developer Websites and Soft of any Complexity! 
20:42 E-currency.exchange — ваш помощник в мире обменов 
18:35 С юмором по жизни! 
22:59 Про мясо 
15:07 Добро пожаловать в цифровой мир... 
22:12 BYTIK.shop – сервис по продвижению в популярных социальных сетях​ 
10:10 накрутка трафика в SimilarWeb 
16:50 Компьютерная мышь 
23:03 Точные прогнозы на футбол