Как в robots.txt закрыть страницы /page от индексации

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

16 Мая 2016 06:13

Как в robots.txt закрыть страницы /page от индексации, как правильно прописать? На сколько я знаю их нужно закрывать

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

16 Мая 2016 08:18

Сделайте лучше через тег роботс=ноуиндекс. Тк закрытые страницы в роботс.тхт все равно могут появляться в индексе гугла.
http://alaev.info/blog/post/3900
Там есть ваш пункт

Изменено: Иван Севостьянов - 16 Мая 2016 08:18

Товарные тизеры - от 3 рублей/клик | Стабильный хостинг от 90 рублей

Rich Dad

Сообщений: 487 Регистрация: Окт 2011

16 Мая 2016 11:49

Цитата
Иван Севостьянов пишет: Сделайте лучше через тег роботс=ноуиндекс. Тк закрытые страницы в роботс.тхт все равно могут появляться в индексе гугла. http://alaev.info/blog/post/3900 Там есть ваш пункт

Я понял как закрыть например главную страницу от индексации тем методом, но как закрыть все страницы /page я что то не понял. Что бы закрыь главную страницу надо будет в main.tpl прописать

Код
<meta name="robots" content="noindex">

А что бы закрыть все страницы /page где этот код прописывать?

Saybb

Сообщений: 1443 Регистрация: Мар 2013

16 Мая 2016 12:04

Rich Dad, Вы вообще читать умеете? Вам дали ссылку где все подробно написано как и где это сделать

Лучшая программа для проверки позиций сайта (15 дней теста бесплатно)

Сайт с онлайн трансляциями, плеерами и видео, Практика рабочая тема Яндекс

web_junkie

Сообщений: 162 Регистрация: Мар 2015

16 Мая 2016 13:07

Disallow: /page/

Но нужно смотреть, как конкретно выглядят урлы. Мне вот так пришлось закрывать:

Disallow: */page/*
Disallow: /page*

Абузоустойчивый хостинг для киносайтов

Иван Севостьянов

Сообщений: 2109 Регистрация: Окт 2011

16 Мая 2016 15:24

Цитата
Saybb пишет: Rich Dad, Вы вообще читать умеете? Вам дали ссылку где все подробно написано как и где это сделать

Во во, там все дословно расписано что куда вставить и прописать.

Новые темы	Объявления	Свободное общение
13:13 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 13:47 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 08:27 Ищу специалистов 08:18 Прибыль 200$ - 400$, за каждую 1000 уников! Google, FB и тд 08:12 ру гембла 09:18 Влияние использования ИИ для написания текстов на позицию в поисковой выдаче 19:42 Продвижение по ключам	17:43 Volna.money 14:17 ProfiCash.ru - обмен Tether ERC-2 04:00 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 14:49 GoodsMoney.io 14:21 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 22:07 Продажа аккаунтов HH.RU 21:59 Belurk — высокоскоростные анонимные прокси от 0,24 рублей	17:09 Точные прогнозы на футбол 10:00 Ну что, кто куда деваете свои сайты? 16:22 Компьютерная мышь 23:55 Добро пожаловать в цифровой мир... 13:13 О природе путешествий. 00:15 Накрутка поисковых подсказок 19:56 Union Pharm - топовая фарма-партнерка для профессионалов!

Новые темы

Объявления

Свободное общение

13:13 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
13:47 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
08:27 Ищу специалистов
08:18 Прибыль 200$ - 400$, за каждую 1000 уников! Google, FB и тд
08:12 ру гембла
09:18 Влияние использования ИИ для написания текстов на позицию в поисковой выдаче
19:42 Продвижение по ключам

17:43 Volna.money
14:17 ProfiCash.ru - обмен Tether ERC-2
04:00 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
14:49 GoodsMoney.io
14:21 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
22:07 Продажа аккаунтов HH.RU
21:59 Belurk — высокоскоростные анонимные прокси от 0,24 рублей

17:09 Точные прогнозы на футбол
10:00 Ну что, кто куда деваете свои сайты?
16:22 Компьютерная мышь
23:55 Добро пожаловать в цифровой мир...
13:13 О природе путешествий.
00:15 Накрутка поисковых подсказок
19:56 Union Pharm - топовая фарма-партнерка для профессионалов!

03.12.2021 19:52	Как в SMF форуме закрыть ссылки с сообщения в nofollow?
16.03.2021 17:04	Как закрыть такую страницу - https://сайт.com/2021/01/15/
19.01.2021 13:01	фото как закрыть от индексации
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
24.11.2019 18:31	sitemap и robots.txt