Как закрыть в роботс страницы пагинации с главной, но оставить с рубрик?
Страницы: 1
Как закрыть в роботс страницы пагинации с главной, но оставить с рубрик?
Подскажите, как можно закрыть в robots.txt страницы типа
site.ru/page/2

но при этом оставить страницы типа
site.ru/category/nazvanie_kategorii/page/2

Почему-то конструкция Disallow: site.ru/page/* не работает, а работает только /page/* но тогда она закроет мне и рубрики(((

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

В общем решил вроде проблему так:
Disallow: /page/*
Allow: /category/*/page/*

Вроде работает. Может кому пригодится)) 
Цитата
Иван пишет:
В общем решил вроде проблему так:
Должно бы хватить
Код
Disallow: /page/
Цитата
Coder пишет:
Должно бы хватить
Код
 Disallow: /page/ 
Спасибо, так не пробовал. Побоялся, что закроет все))
)Пожалуйста - не должно.

В любом случае, проверьте через инструмент роботса в ВМ yandex
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
09:41 Adsense личный опыт 
09:10 Сайт не индексируется гуглом 
07:34 Яндекс не любит украинскй хостинг? 
03:06 Апдейт ИКС 24.05.19 
23:45 Quick Sender - одна из лучших программ для работы с "ВКонтакте" 
19:46 Продвижение в ТОП Яндекс. Мега быстро! 
19:27 Посмотрите пациента) 
10:06 Прогон по личной базе, больше 1000 трастовых сайтов! Продвижение СЧ и НЧ запросов + рост показателей! Гарантии! 
10:02 Продам 3 сайта 
04:31 Схема: 4000 ЖИВЫХ платежеспособных подписчиков в Telegram за 6 часов 
01:39 Сайт Лайм Займ laym-zaym.com 
23:41 XXXChange – бесплатный скрипт мониторинга курсов обмена 
23:02 InstaSpider - инстаграм программа шпион для мониторинга новых подписчиков пользователей 
20:54 Надежный и мотивированный дизайнер, который точно не сорвет сроки и сделает круто 
07:41 Куплю аккаунт ADWORDS 
18:20 Черная тема Adwords, высокооплачиваемо, с гарантом! 
18:01 Стоит ли покупать автонаполняемый сайт 
17:58 Срочно! МОжно ли пользоваться этими гарант-сервисами? 
17:57 Голосование в опросе фейсбук 
17:56 На какую тему создать сайт? 
15:51 Партнерская программа №1 в РФ по ремонту компьютерной и бытовой техники! (CPA 1000р)