robots.txt запрет индексации папки, help
Страницы: 1
robots.txt запрет индексации папки, help
Форумчане, нужна помощь, не могу сообразить... smile:)

Ситуация следующая:
сайт имеет структуру name.com/categorya/2015/6556-staya.html

Нужно в robots.txt закрыть от индексации categorya, 2015, при этом сами статьи в запрет не должны попасть.

Мой вариант:

User-agent: *
Disallow: /categorya/
Disallow: /2015/

Переживаю, что при таком варианте в запрет индексации уйдут статьи внутри папок, в том числе и 6556-staya.html smile:confused:

Бесплатная контекстная реклама

Естественно уйдут при таком варианте) вам надо закрыть реальный абсолютный url (например: /categorya/index.php), а со всех относительных сделать переадресацию на уровне сервера с относительных путей (name.com/categorya/) на абсолютный (name.com/categorya/index.php).
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
08:59 Добавление товаров на Simpla помогите советом! HELP 
08:58 Продвижение в ТОП Яндекс. Мега быстро! 
16:10 Как обналичить деньги через Google Adsens? 
15:04 Когда ставить рекламу на сайт 
14:30 19 июня 2019 АП выдача 
14:14 Turbobit.net - Официальная тема, Costaction ПП 
15:21 Adtrafico - Правильная партнёрская сеть под бурж трафик 
15:25 ПРОДАЖА Credit Card (CC+CVV) различных стра 
14:23 продаю молодой сайт 
11:36 ByWare.net - работаем с наличными RUB/USD/EUR по всей России. 
11:21 Прогон по личной базе, больше 1000 трастовых сайтов! Продвижение СЧ и НЧ запросов + рост показателей! Гарантии! 
09:44 Majento SiteAnalyzer - бесплатная программа для аудита и анализа сайта 
02:29 Сайт Авиабилеты сочи 
22:11 Профессиональное размножение текстов 
14:53 SEO продвижение сайтов в Яндекс, Google. Поднятие ИКС сайту, исправления ошибок, разработка стратегий 
19:20 Посоветуйте фильм - фантастику 
19:18 На какую тему создать сайт? 
10:37 Что лучше для сайта прогон или контекст ? 
09:12 Сколько у вас длилась модерация сайта в Дзене? 
17:13 Кто поджёг РКН? 
11:10 Lucky.Online - собственные офферы, КЦ 24/7, стабильно высокий апрув