Как в robots.txt закрыть страницы /page от индексации

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

16 Мая 2016 06:13

Как в robots.txt закрыть страницы /page от индексации, как правильно прописать? На сколько я знаю их нужно закрывать

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

16 Мая 2016 08:18

Сделайте лучше через тег роботс=ноуиндекс. Тк закрытые страницы в роботс.тхт все равно могут появляться в индексе гугла.
http://alaev.info/blog/post/3900
Там есть ваш пункт

Изменено: Иван Севостьянов - 16 Мая 2016 08:18

Товарные тизеры - от 3 рублей/клик | Стабильный хостинг от 90 рублей

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

16 Мая 2016 11:49

Цитата
Иван Севостьянов пишет: Сделайте лучше через тег роботс=ноуиндекс. Тк закрытые страницы в роботс.тхт все равно могут появляться в индексе гугла. http://alaev.info/blog/post/3900 Там есть ваш пункт

Я понял как закрыть например главную страницу от индексации тем методом, но как закрыть все страницы /page я что то не понял. Что бы закрыь главную страницу надо будет в main.tpl прописать

Код
<meta name="robots" content="noindex">

А что бы закрыть все страницы /page где этот код прописывать?

Saybb

Сообщений: 1443 Регистрация: Мар 2013

16 Мая 2016 12:04

Rich Dad, Вы вообще читать умеете? Вам дали ссылку где все подробно написано как и где это сделать

Лучшая программа для проверки позиций сайта (15 дней теста бесплатно)

Сайт с онлайн трансляциями, плеерами и видео, Практика рабочая тема Яндекс

web_junkie

Сообщений: 162 Регистрация: Мар 2015

16 Мая 2016 13:07

Disallow: /page/

Но нужно смотреть, как конкретно выглядят урлы. Мне вот так пришлось закрывать:

Disallow: */page/*
Disallow: /page*

Абузоустойчивый хостинг для киносайтов

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

16 Мая 2016 15:24

Цитата
Saybb пишет: Rich Dad, Вы вообще читать умеете? Вам дали ссылку где все подробно написано как и где это сделать

Во во, там все дословно расписано что куда вставить и прописать.

Новые темы	Объявления	Свободное общение
11:48 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу 21:57 Раскрутка форума 13:45 SEO под нейро 13:42 Телега на ручнике: РКН включил замедление и логи админок покраснели 13:07 MAX выкатил приватные каналы - закрытые тусы теперь лепишь за минуту 18:07 Гугл уходит из России: почему интернет тормозит и что делать 15:17 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options	12:15 Скрипт обменника валют 04:47 Onechange.me — надежный обменник криптовалют и фиатных средств 23:29 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram 16:30 Mixmasters - Exchange without AML and KYC 15:09 Nexulume.com Обменник без AML и KYC 09:02 Swapwatch.org — Мониторинг криптовалютных обменников 22:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств	12:49 Туалетные секреты: Замурчательная тема 12:48 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 12:22 Оцифровка старых физических фотографий 11:47 Добро пожаловать в цифровой мир... 08:49 Точные прогнозы на футбол 23:03 Ставки на супер тренды в спорте 18:43 Индия влепила Intel 3 ляма баксов за дискриминацию по гарантии

Новые темы

Объявления

Свободное общение

11:48 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу
21:57 Раскрутка форума
13:45 SEO под нейро
13:42 Телега на ручнике: РКН включил замедление и логи админок покраснели
13:07 MAX выкатил приватные каналы - закрытые тусы теперь лепишь за минуту
18:07 Гугл уходит из России: почему интернет тормозит и что делать
15:17 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options

12:15 Скрипт обменника валют
04:47 Onechange.me — надежный обменник криптовалют и фиатных средств
23:29 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram
16:30 Mixmasters - Exchange without AML and KYC
15:09 Nexulume.com Обменник без AML и KYC
09:02 Swapwatch.org — Мониторинг криптовалютных обменников
22:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств

12:49 Туалетные секреты: Замурчательная тема
12:48 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео?
12:22 Оцифровка старых физических фотографий
11:47 Добро пожаловать в цифровой мир...
08:49 Точные прогнозы на футбол
23:03 Ставки на супер тренды в спорте
18:43 Индия влепила Intel 3 ляма баксов за дискриминацию по гарантии

03.12.2021 19:52	Как в SMF форуме закрыть ссылки с сообщения в nofollow?
16.03.2021 17:04	Как закрыть такую страницу - https://сайт.com/2021/01/15/
19.01.2021 13:01	фото как закрыть от индексации
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
24.11.2019 18:31	sitemap и robots.txt