Итак, у меня есть сайт. На нем множество категорий. Когда я публикую новость - она отображается на главной и в категории, в которую я добавил. У меня на главной уже 5 страниц и все эти новости есть и в категориях отдельно. Так вот вопрос: стоит ли прописать правило в роботс Disallow: /page/ , чтобы пс не индексировали страницы на главной сайта, а сосредоточились на категориях. Конечно в поиск войдет главная, но начиная со 2-ой страницы отображаться не будет. В поиск не попадут site.ru/page/ но попадет site.ru/cat/page/ Или оставить без изменений??
Закрытие /page/ в роботс
Закрытие /page/ в роботс, правильно ли я делаю??
|
#1
12 Мая 2013 10:44
|
|
#2
12 Мая 2013 20:37
Можно конечно и прописать, но лучше оставить так.
Ещё прежде чем работать с robots.txt почитайте вот этот сайт Все о файле «robots.txt» по-русски — как составить robots.txt |
|
#3
18 Мая 2013 00:28
Я на всех своих сайтах прописываю в robots.txt строку Disallow: /page/ и вам советую. Эти страницы будут мусором в выдаче и не будут приносить посетителей на сайт.
|
|
#4
18 Мая 2013 00:44
А чем отличается Disallow: /page/ и Disallow: /*page/???
|
|
#5
18 Мая 2013 01:30
второй вариант - что угодно, а в конце page и опять что угодно |
|
#6
18 Мая 2013 02:29
Ясно,спасибо.У меня просто когда было прописано Disallow: /page/ закрывались не все page от индексации,а вот когда прописал Disallow: /*page/ Всё стало хорошо:)
|
|
#7
18 Мая 2013 03:01
 |
|
#8
17 Апреля 2014 16:28
Такой вопросик интересует, подскажите. Читая предыдущие посты немного не понял как закрыть page внутри категорий.
Сейчас у меня в роботс стоит: Disallow: /page/ Как сделать, чтобы закрылись страницы внутри категорий? Так? Disallow: /category/page/* После этого у меня сами категории не закроются для индексации? |
|
#9
17 Апреля 2014 22:07
Пропиши таким образом - Disallow: */page/*
Изменено:
Илья Сальков - 17 Апреля 2014 22:09
|
|
#10
17 Апреля 2014 22:09
|
|
#11
17 Апреля 2014 22:09
Таким образом, ты закроешь страницы пагинации вида /page/1, /page/2 , /page/3 и тд
И закроешь вида /category/page, /category/page/1 и тд Сами страницы категорий не закроются. |
|
#12
17 Апреля 2014 23:09
Правильно так Disallow: /*page ИМХОУ меня страницы закрываются только так,любым другим способом закрываются не все страницы
|
|
#13
18 Апреля 2014 10:40
Кстати много где слышал, что page нельзя закрывать от индексации, чтобы роботу было проще проходить по страницам сайта и индексировать их. Могу заверить, ничего подобного! С уник контентом, сайт влетаем в индекс на ура и без page, тем более что на них пользователь ничего полезного не найдет переходя на них из поиска. Так что смело закрывайте. Обращение было больше к новичкам) |
||||
Похожие темы:
| 30.12.2018 23:15 | Страница доступна по адресам pagehtml и page.html, как исправить ? |
| 27.05.2017 17:17 | нужен ваш совет по DownPage |
| 24.08.2014 23:54 | "My Webpage" на слово "Скачать" при вставке ссылки |
| 29.08.2012 02:51 | Проблема с закрытием от индексиции доп. полей. |
| 09.07.2012 22:04 | Закрытие ссылок от индексации на DLE |
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Апдейты
- Яндекс ИКС
23.12.2025 (48 дней назад) - Яндекс выдача
07.02.2026 (2 дня назад)
Доска объявлений
Купить / Продать
Работа / Услуги
Интересные темы
Интернет новости
Инструменты