Роботс
Страницы: 1
Роботс, Помогите
Вот ломаю голову,как запретить индексировать страницы.
 Имеется сайт.ру/articles/2/page1/ нужно запретить к индексации навигационные страницы т.е page1/ page2/ и тд
Ни у кого нет желания помочь ?
а разве они не динамические, т.е. со знаком ?
я их не запрещал и всё в порядке... а Вам зачем, если не секрет? smile:confused:
Disallow: /articles/2/* или

Disallow: /articles/2/page1/   в роботс.ткст, а для ускорения удаления страничек из выдачи,рекомендую воспользоваться "удалением ссылки" в панели вебмастера гугла, а яша сам со временем удалит
Цитата
Gyorgy пишет:
а разве они не динамические, т.е. со знаком ?
Нет,статические

Цитата
Gyorgy пишет:
я их не запрещал и всё в порядке... а Вам зачем, если не секрет? smile:confused:
Чтоб дублей не было

Цитата
Местный Шерлок пишет:
Disallow: /articles/2/*
это может сработать

Цитата
Местный Шерлок пишет:

Disallow: /articles/2/ page1/
А тут закрывается только страница page1,а какже page2 и тд
ЗЫ статьи находятся по адресу сайт.ру/articles/2/1/ , сайт.ру/articles/2/2/
Цитата
ninzj_lost пишет:
Местный Шерлок пишет:
Disallow: /articles/2/*это может сработать
Да, сработает, но это лишь закроет всю последовательность составных символов  /articles/2/, т.е. все что встретиться именно с этой последовательностью и сработает в рамках конкретных дирректорий. А как быть с остальными документами внутри?
Символ звездочка (*) обозначает запрет на индексацию последовательность указанных символов. Например, строчка: Disallow: *page запретит к индексации страницы, в адресе которых встречается последовательность конкретных символов page. Таким образом, не будут индексироваться страницы с адресами:
http://site.ru/blabla/page.html
http://site.ru/newpage/
http://site.ru/111/page/
http://site.ru/1bla1/555/page1/
http://site.ru/page/  и т.д.
Т.е. все страницы, где встречается строгая последовательность символов p a g e будут закрыты.
Если это не удовлетворяет, воспользуйтесь мета тегом <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">, поставив его в теле документа, внутри <head>, указав его на каждой странице требуемой запрета от индексации.
Запрещаю всегда, а то выходит серьезный дублеж текста в категориях и пейджах (категории не запрещаю)
Возьму один коммерческий сайт на продвижение с бюджетом 700$ и выше под Русско язычную аудиторию.
Цитата
Starik пишет:
Starik
Значит,чтоб закрыть страницу сайт.ру/articles/2/page1/ достаточно вставить эту строчку ?
Disallow: /*page1
Изменено: ninzj_lost - 5 Марта 2013 23:34
Цитата
ninzj_lost пишет:
Значит,чтоб закрыть страницу сайт.ру/articles/2/ page1/ достаточно вставить эту строчку ?
Disallow: /*page1
Все что после звездочки - это запрет на последовательность символов, встречающихся где либо в урле.

Если просто хотите закрыть конкретный раздел (page1) со всем его внутренним содержимым по следующему пути, вставьте  Disallow: /articles/2/page1/
дальше /page1/ /page2/ / page3/ и т.д ни чего нету. Что-то я запутался:confused:
Тему можно закрывать
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:03 Биржи ссылок в 2026 - реально ли новичку с одним сайтом поднять копейку? 
00:01 С чего сейчас проще начать? 
00:00 Бесплатное получение бэклинков 
23:58 Бесплатное расширение для Chrome — проверка ссылок прямо на странице 
23:53 Хватит ныть про смерть сайтов и нейроответы - почему мы всё еще в деле 
13:49 Ап выдачи Яндекса 8 апреля - есть движение, но интереснее что творится с AI-ответами Google 
02:10 Яху Скаут и китайцы - есть там вообще жизнь для новичка в 2026? 
23:36 GoodsMoney.io 
23:35 Volna.money 
14:48 Monitex: Мониторинг с кэшбэком 80% в USDT 
13:58 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 
09:40 GhostRocket.pro — Взлетаем в новую эру криптообмена! 
09:33 От $0.015 за IP | $0.68 за ГБ | 9PROXY.COM | 20+ млн резидентных прокси | 99,95% аптайм | Без чёрных списков 
08:22 Мониторинг обменников Сrypto-scout.io 
04:52 Точные прогнозы на футбол 
23:51 Сайты Рунета 
17:50 Ставки на супер тренды в спорте 
13:44 Во Франции начали штрафовать за IPTV - до 300-400 евро уже прилетает обычным пользователям 
12:55 Курс доллара упал ниже 85 рублей 
10:21 Список обновленных тем пуст... 
02:12 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди