Что прописать в robots.txt

Сообщений: 1217 Регистрация: Авг 2011

17 Мая 2012 08:48

Извиняюсь, если вопрос уже поднимался.
Знатоки robots.txt подскажите какую строку нужно прописать, чтоб закрыть категории и страницы архива на козе:

Пример:
сайт.ру/news/категория - закрыть
сайт.ру/news/цифра(№страницы) - закрыть

сайт.ру/news/название новости - оставить открытым

Заранее спасибо.

Кино здесь или здесь | СЯ без мусора | 2,5 руб за безанкор | Ищу подработку

felis_serval

Сообщений: 11061 Регистрация: Окт 2010

17 Мая 2012 10:13

http://www.cy-pr.com/forum/f15/t28518/
как раз вчера с этой темой разбиралась.
Disallow: /articles/?p=$ закроет страницы категорий. Директива не запрещает первую страницу категории, установлено опытным путем. Если у Вас в категории статьи имеют ссылки третьего уровня эту страницу Вы никак не закроете.

Алексей SP

Сообщений: 1217 Регистрация: Авг 2011

17 Мая 2012 10:23

felis_serval, категорий у меня не много, поэтому их можно прописать вручную закрыть. Интересует как закрыть вот такое: сайт.ру/news/цифра(№страницы) - чтоб если после news/ идет цифра то закрыто, а если посте news/ идет слово то открыто.
Наверно не реально это.

JOK#R

Сообщений: 7396 Регистрация: Окт 2011

17 Мая 2012 10:25

help.yandex.ru/webmaster/?id=996567
Уже не помогает?

Оптимизация сайтов - Заказать!
У тебя пропали позиции? Сайт в АГС? Нету посещений? Позиции калл? Пиши мне!

Алексей SP

Сообщений: 1217 Регистрация: Авг 2011

17 Мая 2012 10:30

JOK#R, какой ты молодец, а я и не знал smile:D

(шутка)
Вопрос открыт.

felis_serval

Сообщений: 11061 Регистрация: Окт 2010

17 Мая 2012 10:30

Цитата

Алексей SP пишет:
felis_serval, категорий у меня не много, поэтому их можно прописать вручную закрыть. Интересует как закрыть вот такое: сайт.ру/news/цифра(№страницы) - чтоб если после news/ идет цифра то закрыто, а если посте news/ идет слово то открыто.
Наверно не реально это.

Disallow: /articles/?цифра=$, вот и всё.
А категории если просто пропишете типа Disallow: /articles/ у Вас закроется весь каталог, все статьи в нем.

Алексей SP

Сообщений: 1217 Регистрация: Авг 2011

17 Мая 2012 10:38

Цитата

felis_serval пишет:

Цитата

Первое попробую, а второе знаю.
Спасибо.

JOK#R

Сообщений: 7396 Регистрация: Окт 2011

17 Мая 2012 10:41

Проще перепиши код - И пусть не будет у Записей \Category\rubrika\pod_rubrika\teg\Name_text
Так, как поисковые системы плохо относятся к таким Адресам.

Алексей SP

Сообщений: 1217 Регистрация: Авг 2011

17 Мая 2012 11:12

JOK#R, я просто в первом сообщении написал что сайт на козе

JOK#R

Сообщений: 7396 Регистрация: Окт 2011

#10

17 Мая 2012 12:41

Тупая коза значит... =(
Сделай тогда \ \$ - поидее так запретит только раздел.

Алексей SP Сообщений: 1217 Регистрация: Авг 2011	#11 17 Мая 2012 13:03 JOK#R, я знаю, я и так линк сократил на сколько возможно

24.10.2018 23:02	Дублирование и robots DLE
21.11.2017 22:18	Robots.txt для бурж сайта
21.02.2017 10:59	Robots.txt для html сайта
05.11.2016 16:00	Помогите прописать редирект, когда окончание ссылки корявое((
31.10.2016 23:27	подскажите как правильно прописать в в роботс

Новые темы	Объявления	Свободное общение
19:44 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов? 19:23 Adsense личный опыт 19:21 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу 23:22 Рост эффективности моего интернет‑магазина 22:07 С чего сейчас проще начать? 22:02 как оплатить claude и gpt-5 из рф в 2026 чтобы не забанили через три дня 21:36 Трафик в минус, соцсети в топе - Завершено февральское обновление Google Discover	19:36 Русские народные сказки - оцените! 14:27 1obmen.net - обмен криптовалют: выплаты в USD, EUR, GBP, CAD, CNY 13:22 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 12:39 Monitex: Мониторинг с кэшбэком 80% в USDT 12:21 garantcoin.io - быстрый и надёжный сервис обмена криптовалюты GarantCoin 09:01 Мониторинг обменников Сrypto-scout.io 04:32 От $0.015 за IP \| $0.68 за ГБ \| 9PROXY.COM \| 20+ млн резидентных прокси \| 99,95% аптайм \| Без чёрных списков	19:56 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 19:55 Список обновленных тем пуст... 22:55 С юмором по жизни! 22:19 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 21:16 Почему не обновляется счетчик ИКС (индекса качества сайта) 19:57 молодильные яблоки и живая вода 01:50 Точные прогнозы на футбол