robots.txt запрет индексации папки, help
Страницы: 1
robots.txt запрет индексации папки, help
Форумчане, нужна помощь, не могу сообразить... smile:)

Ситуация следующая:
сайт имеет структуру name.com/categorya/2015/6556-staya.html

Нужно в robots.txt закрыть от индексации categorya, 2015, при этом сами статьи в запрет не должны попасть.

Мой вариант:

User-agent: *
Disallow: /categorya/
Disallow: /2015/

Переживаю, что при таком варианте в запрет индексации уйдут статьи внутри папок, в том числе и 6556-staya.html smile:confused:

Комплексное SEO продвижение в поисковых системах Яндекс, Google

Естественно уйдут при таком варианте) вам надо закрыть реальный абсолютный url (например: /categorya/index.php), а со всех относительных сделать переадресацию на уровне сервера с относительных путей (name.com/categorya/) на абсолютный (name.com/categorya/index.php).
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
08:30 Яндекс выдача - Апдейт - 17 августа 
08:29 Обновление поисковой базы 25.08.2019. 
16:46 Обновление поисковой базы 24.08.2019 
19:14 Плохие результаты вывода в топ 
17:57 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
16:58 Посмотрите пациента) 
15:05 Adtrafico - Правильная партнёрская сеть под бурж трафик 
09:22 Продажа баз доменов на различных эксклюзивных CMS 
09:08 Продам 9-летний аккаунт MMGP.COM 
08:41 Размещу 1501 ссылку на Ваш сайт. + Бонус 
08:17 Продам юридический сайт 
06:11 Продам сайт екапуста займ ekapustazaym.com 
23:01 Купоны и аккаунты яндекс директ на 6000р. Самые низкие цены! 
20:16 Создание сайтов / Верстка / Доработка сайтов 
15:16 Раскрутить сайт игрушек для взрослых 
13:03 Прыг скок в ТОП 
09:14 Создать аккаунт Google Adwords за 1000 рублей 
17:46 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок 
12:44 Друзья, предлагаю собраться и сходить в Москве на пикник 
10:54 Как генерировать IT лиды 
11:48 SEO продвижение сайтов в Яндекс, Google. Поднятие ИКС сайту, исправления ошибок, разработка стратегий