Стоит ли в robots.txt закрывать страницы /page/ ?

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

1 Мая 2016 05:32

Стоит ли в robots.txt закрывать страницы /page/ от индексации ?

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

1 Мая 2016 08:30

Конечно, а лучше тегом ноуидекс, так как закрытые в роботс они все равно вылазят в гугле.

Товарные тизеры - от 3 рублей/клик | Стабильный хостинг от 90 рублей

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

1 Мая 2016 09:42

Цитата
Иван Севостьянов пишет: Конечно, а лучше тегом ноуидекс, так как закрытые в роботс они все равно вылазят в гугле.

Почему их так важно закрыть от индексации?

Иван Севостьянов Сообщений: 2109 Регистрация: Окт 2011	#4 1 Мая 2016 10:01 Потому что у этих страниц метатеги идентичны странице page/1. То есть возникает дублирование страниц. Хотя в заголовок сейчас вроде подставляется автоматом, например "страница 2" после заголовка, но все равно. Изменено: Иван Севостьянов - 1 Мая 2016 10:02

Новые темы	Объявления	Свободное общение
01:46 Настроить поставщиков в программе E-Trade PriceList Importer 15:26 Найти элемент в коде 11:51 Bropush - твой бро в монетизации сайта push-уведомлениями 03:12 Сайты-копипасты 21:47 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 09:59 Ошибка после размещения кода HTML! 15:34 Adtrafico - Правильная партнёрская сеть под бурж трафик	20:17 4G/LTE Mobile Proxy 30+ geo 18:03 Обмен без AML и верификации Aztor.pro 17:30 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 16:34 Phoenix - Выгодный обмен электронных валют, без верификации 16:11 ZennoPoster - софт №1 для автоматизации любых SEO задач! 13:30 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 13:22 Burzh.top\|Партнерская программа под любой вид трафика (email, спам, УБТ)	12:48 Каспкрски ОС 11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 01:05 Точные прогнозы на футбол 14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок 15:24 Добро пожаловать в цифровой мир... 22:58 У меня дикая просадка по РСЯ за последние 3 суток 21:51 Linux - это максимальная свобода

Новые темы

Объявления

Свободное общение

01:46 Настроить поставщиков в программе E-Trade PriceList Importer
15:26 Найти элемент в коде
11:51 Bropush - твой бро в монетизации сайта push-уведомлениями
03:12 Сайты-копипасты
21:47 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
09:59 Ошибка после размещения кода HTML!
15:34 Adtrafico - Правильная партнёрская сеть под бурж трафик

20:17 4G/LTE Mobile Proxy 30+ geo
18:03 Обмен без AML и верификации Aztor.pro
17:30 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр.
16:34 Phoenix - Выгодный обмен электронных валют, без верификации
16:11 ZennoPoster - софт №1 для автоматизации любых SEO задач!
13:30 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика
13:22 Burzh.top|Партнерская программа под любой вид трафика (email, спам, УБТ)

12:48 Каспкрски ОС
11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
01:05 Точные прогнозы на футбол
14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок
15:24 Добро пожаловать в цифровой мир...
22:58 У меня дикая просадка по РСЯ за последние 3 суток
21:51 Linux - это максимальная свобода

30.11.2022 10:08	Накрутка ПФ - сколько может стоить?
09.02.2021 10:57	Чего стоит ожидать после изменений процесса идентификации в Яндекс Дзен?
20.10.2018 20:14	Стоит ли выкладывать рекламу в яндекс ?
01.10.2018 16:57	Слетели позиции после изменения robots.txt
17.01.2018 14:13	Передается ли вес через robots.txt у Яндекса