Как в robots.txt закрыть страницы /page от индексации

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

16 Мая 2016 06:13

Как в robots.txt закрыть страницы /page от индексации, как правильно прописать? На сколько я знаю их нужно закрывать

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

16 Мая 2016 08:18

Сделайте лучше через тег роботс=ноуиндекс. Тк закрытые страницы в роботс.тхт все равно могут появляться в индексе гугла.
http://alaev.info/blog/post/3900
Там есть ваш пункт

Изменено: Иван Севостьянов - 16 Мая 2016 08:18

Товарные тизеры - от 3 рублей/клик | Стабильный хостинг от 90 рублей

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

16 Мая 2016 11:49

Цитата
Иван Севостьянов пишет: Сделайте лучше через тег роботс=ноуиндекс. Тк закрытые страницы в роботс.тхт все равно могут появляться в индексе гугла. http://alaev.info/blog/post/3900 Там есть ваш пункт

Я понял как закрыть например главную страницу от индексации тем методом, но как закрыть все страницы /page я что то не понял. Что бы закрыь главную страницу надо будет в main.tpl прописать

Код
<meta name="robots" content="noindex">

А что бы закрыть все страницы /page где этот код прописывать?

Saybb

Сообщений: 1443 Регистрация: Мар 2013

16 Мая 2016 12:04

Rich Dad, Вы вообще читать умеете? Вам дали ссылку где все подробно написано как и где это сделать

Лучшая программа для проверки позиций сайта (15 дней теста бесплатно)

Сайт с онлайн трансляциями, плеерами и видео, Практика рабочая тема Яндекс

web_junkie

Сообщений: 162 Регистрация: Мар 2015

16 Мая 2016 13:07

Disallow: /page/

Но нужно смотреть, как конкретно выглядят урлы. Мне вот так пришлось закрывать:

Disallow: */page/*
Disallow: /page*

Абузоустойчивый хостинг для киносайтов

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

16 Мая 2016 15:24

Цитата
Saybb пишет: Rich Dad, Вы вообще читать умеете? Вам дали ссылку где все подробно написано как и где это сделать

Во во, там все дословно расписано что куда вставить и прописать.

Новые темы	Объявления	Свободное общение
14:31 Rotapost прикрыли! Чем пользоваться? 00:23 Раскрутка форума 00:19 Продвижение по ключам 17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 14:07 2Index - быстрая индексация страниц сайта и обратных ссылок 12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 22:23 Подскажите нормальный сервис накрутки ПФ	15:40 TokenTrade — Ваш новый надежный обменник 15:15 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 13:22 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 11:07 SiteAnalyzer SEO Tools - бесплатное браузерное расширение для Chrome & Firefox 10:54 garantcoin.io - быстрый и надёжный сервис обмена криптовалюты GarantCoin 16:15 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 16:04 CryptoGraph — Анонимный обмен криптовалют без KYC и AML	16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники?

Новые темы

Объявления

Свободное общение

14:31 Rotapost прикрыли! Чем пользоваться?
00:23 Раскрутка форума
00:19 Продвижение по ключам
17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
14:07 2Index - быстрая индексация страниц сайта и обратных ссылок
12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
22:23 Подскажите нормальный сервис накрутки ПФ

15:40 TokenTrade — Ваш новый надежный обменник
15:15 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
13:22 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно
11:07 SiteAnalyzer SEO Tools - бесплатное браузерное расширение для Chrome & Firefox
10:54 garantcoin.io - быстрый и надёжный сервис обмена криптовалюты GarantCoin
16:15 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника
16:04 CryptoGraph — Анонимный обмен криптовалют без KYC и AML

16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру
20:43 Добро пожаловать в цифровой мир...
15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь
22:55 Ну что, кто куда деваете свои сайты?
22:34 Используете беспроводные наушники?

03.12.2021 19:52	Как в SMF форуме закрыть ссылки с сообщения в nofollow?
16.03.2021 17:04	Как закрыть такую страницу - https://сайт.com/2021/01/15/
19.01.2021 13:01	фото как закрыть от индексации
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
24.11.2019 18:31	sitemap и robots.txt