Стоит ли в robots.txt закрывать страницы /page/ ?

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

1 Мая 2016 05:32

Стоит ли в robots.txt закрывать страницы /page/ от индексации ?

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

1 Мая 2016 08:30

Конечно, а лучше тегом ноуидекс, так как закрытые в роботс они все равно вылазят в гугле.

Товарные тизеры - от 3 рублей/клик | Стабильный хостинг от 90 рублей

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

1 Мая 2016 09:42

Цитата
Иван Севостьянов пишет: Конечно, а лучше тегом ноуидекс, так как закрытые в роботс они все равно вылазят в гугле.

Почему их так важно закрыть от индексации?

Иван Севостьянов Сообщений: 2109 Регистрация: Окт 2011	#4 1 Мая 2016 10:01 Потому что у этих страниц метатеги идентичны странице page/1. То есть возникает дублирование страниц. Хотя в заголовок сейчас вроде подставляется автоматом, например "страница 2" после заголовка, но все равно. Изменено: Иван Севостьянов - 1 Мая 2016 10:02

Новые темы	Объявления	Свободное общение
22:23 Подскажите нормальный сервис накрутки ПФ 15:44 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 19:33 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 15:12 Несколько статей хорошо выдаются в Гугле, но отвратительно в Яндексе 13:40 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 11:41 2Index - быстрая индексация страниц сайта и обратных ссылок	20:15 Belurk — высокоскоростные анонимные прокси от 0,24 рублей 19:25 Whatsapp рассылки и реселлерская программа 17:01 Продажа горячих лидов под крипту / Crypto Leads for Sale 13:17 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 11:51 FundEx.cc - Платформа для обмена USDT ⇄ RUB \| Выгодные курсы 11:19 Прокси IPv6 Россия 10:40 Услуги продвижения в авито	16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники?

Новые темы

Объявления

Свободное общение

22:23 Подскажите нормальный сервис накрутки ПФ
15:44 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг
19:33 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
15:12 Несколько статей хорошо выдаются в Гугле, но отвратительно в Яндексе
13:40 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
11:41 2Index - быстрая индексация страниц сайта и обратных ссылок

20:15 Belurk — высокоскоростные анонимные прокси от 0,24 рублей
19:25 Whatsapp рассылки и реселлерская программа
17:01 Продажа горячих лидов под крипту / Crypto Leads for Sale
13:17 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик]
11:51 FundEx.cc - Платформа для обмена USDT ⇄ RUB | Выгодные курсы
11:19 Прокси IPv6 Россия
10:40 Услуги продвижения в авито

16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру
20:43 Добро пожаловать в цифровой мир...
15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь
22:55 Ну что, кто куда деваете свои сайты?
22:34 Используете беспроводные наушники?

30.11.2022 10:08	Накрутка ПФ - сколько может стоить?
09.02.2021 10:57	Чего стоит ожидать после изменений процесса идентификации в Яндекс Дзен?
20.10.2018 20:14	Стоит ли выкладывать рекламу в яндекс ?
01.10.2018 16:57	Слетели позиции после изменения robots.txt
17.01.2018 14:13	Передается ли вес через robots.txt у Яндекса