Как в robots.txt закрыть страницы /page от индексации

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

16 Мая 2016 06:13

Как в robots.txt закрыть страницы /page от индексации, как правильно прописать? На сколько я знаю их нужно закрывать

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

16 Мая 2016 08:18

Сделайте лучше через тег роботс=ноуиндекс. Тк закрытые страницы в роботс.тхт все равно могут появляться в индексе гугла.
http://alaev.info/blog/post/3900
Там есть ваш пункт

Изменено: Иван Севостьянов - 16 Мая 2016 08:18

Товарные тизеры - от 3 рублей/клик | Стабильный хостинг от 90 рублей

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

16 Мая 2016 11:49

Цитата
Иван Севостьянов пишет: Сделайте лучше через тег роботс=ноуиндекс. Тк закрытые страницы в роботс.тхт все равно могут появляться в индексе гугла. http://alaev.info/blog/post/3900 Там есть ваш пункт

Я понял как закрыть например главную страницу от индексации тем методом, но как закрыть все страницы /page я что то не понял. Что бы закрыь главную страницу надо будет в main.tpl прописать

Код
<meta name="robots" content="noindex">

А что бы закрыть все страницы /page где этот код прописывать?

Saybb

Сообщений: 1443 Регистрация: Мар 2013

16 Мая 2016 12:04

Rich Dad, Вы вообще читать умеете? Вам дали ссылку где все подробно написано как и где это сделать

Лучшая программа для проверки позиций сайта (15 дней теста бесплатно)

Сайт с онлайн трансляциями, плеерами и видео, Практика рабочая тема Яндекс

web_junkie

Сообщений: 162 Регистрация: Мар 2015

16 Мая 2016 13:07

Disallow: /page/

Но нужно смотреть, как конкретно выглядят урлы. Мне вот так пришлось закрывать:

Disallow: */page/*
Disallow: /page*

Абузоустойчивый хостинг для киносайтов

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

16 Мая 2016 15:24

Цитата
Saybb пишет: Rich Dad, Вы вообще читать умеете? Вам дали ссылку где все подробно написано как и где это сделать

Во во, там все дословно расписано что куда вставить и прописать.

Новые темы	Объявления	Свободное общение
08:50 "Осталось 5 дн. до НГ" АПдейт Яндекс выдача 08:48 Стоит ли добавлять сайт в Rambler топ 100? 08:46 С наступающим Новым годом! АП Яндекс ИКС 23.12.2025 08:36 25.12.25 Апдейт Яндекс выдача 08:36 Супер-партнерка PayV: избранные офферы в топовых нишах 08:33 Ссылки с сайтов РБ 08:11 Волна банов за ПФ под Новый год? Кого еще зацепило?	14:59 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 10:06 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 08:53 Размещение статей, ссылок и постовых на качественных ресурсах 08:22 Мониторинг обменников Сrypto-scout.io 04:17 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 03:54 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram 19:18 Oblaka.in — Обмен криптовалюты быстро, выгодно и безопасно	11:18 Стряхнуть обыденность - об Агасфере 08:42 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 23:08 Физические сим-карты 22:52 37 противникам прививок от COVID грозят уголовные дела 21:44 С юмором по жизни! 13:34 Компьютерная мышь 13:13 Куплю проигрышные букмекерские аккаунты

Новые темы

Объявления

Свободное общение

08:50 "Осталось 5 дн. до НГ" АПдейт Яндекс выдача
08:48 Стоит ли добавлять сайт в Rambler топ 100?
08:46 С наступающим Новым годом! АП Яндекс ИКС 23.12.2025
08:36 25.12.25 Апдейт Яндекс выдача
08:36 Супер-партнерка PayV: избранные офферы в топовых нишах
08:33 Ссылки с сайтов РБ
08:11 Волна банов за ПФ под Новый год? Кого еще зацепило?

14:59 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру
10:06 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
08:53 Размещение статей, ссылок и постовых на качественных ресурсах
08:22 Мониторинг обменников Сrypto-scout.io
04:17 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
03:54 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram
19:18 Oblaka.in — Обмен криптовалюты быстро, выгодно и безопасно

11:18 Стряхнуть обыденность - об Агасфере
08:42 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
23:08 Физические сим-карты
22:52 37 противникам прививок от COVID грозят уголовные дела
21:44 С юмором по жизни!
13:34 Компьютерная мышь
13:13 Куплю проигрышные букмекерские аккаунты

03.12.2021 19:52	Как в SMF форуме закрыть ссылки с сообщения в nofollow?
16.03.2021 17:04	Как закрыть такую страницу - https://сайт.com/2021/01/15/
19.01.2021 13:01	фото как закрыть от индексации
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
24.11.2019 18:31	sitemap и robots.txt