Вопрос по Robots.txt

Сообщений: 515 Регистрация: Ноя 2010

16 Января 2012 23:05

Здравствуйте!
Возможно ли в Robots закрыть страницы, содержащие в адресе элемент /go/.
Например:
site.ru/darkorbit/go/speedhack-darkorbit
site.ru/cs-source/go/-wh-css-v64-steam
и т.д.
Статьи раньше были через этот элемент /go/, сейчас все статьи выходят без него.
Так же верхние примеры доступны по нормальной ссылке:
site.ru/darkorbit/speedhack-darkorbit
site.ru/cs-source/-wh-css-v64-steam
Но и с /go/ так-же прекрасно открываются.
Получаются дубли страниц, они совсем не нужны...

Дмитрий Сорокин

Сообщений: 2729 Регистрация: Мар 2010

16 Января 2012 23:46

User-agent: *
Disallow: /go/

ov3rdoc

Сообщений: 515 Регистрация: Ноя 2010

16 Января 2012 23:50

Цитата
Дмитрий Сорокин пишет: User-agent: * Disallow: /go/

Всё так просто? smile:)

KylukovAV

Сообщений: 1276 Регистрация: Май 2011

16 Января 2012 23:53

go это у вас что редикет?, если да то Дмитрий Сорокин правильно написал

Дмитрий Сорокин

Сообщений: 2729 Регистрация: Мар 2010

16 Января 2012 23:57

Цитата
ov3rdoc пишет: Всё так просто?

Возможно ошибся, если сайт имеет структуру

Код
site.ru/darkorbit/go/speedhack-darkorbit site.ru/cs-source/go/-wh-css-v64-steam

то кажется нужно так

Код
User-agent: * Disallow: /*/go/

ov3rdoc

Сообщений: 515 Регистрация: Ноя 2010

17 Января 2012 00:01

KylukovAV,
В joomla 1.5, в стандартном SEF ссылки имеют вид сайт/категория/раздел/статья.
Т.К. Категории и разделы у меня назывались одинаково ссылки были вида сайт/супы/супы/борщ. Это так к примеру. Решил сделать псевдоним ко всем разделам "go", получилось что-то вроде сайт/супы/go/борщ. В скором времени решил проблему и теперь статьи вида сайт/супы/борщ, но в индексе ПСов остались некоторые страницы вида сайт/супы/go/борщ. И сама страница открывается и по этому адресу. Вот не знаю можно ли это назвать "редикетом"...

Дмитрий Сорокин

Сообщений: 2729 Регистрация: Мар 2010

17 Января 2012 00:07

Цитата
ov3rdoc пишет: Вот не знаю можно ли это назвать "редикетом"...

Вы оптимизатор или кто, что не знаете таких елементарных вещей?

ov3rdoc

Сообщений: 515 Регистрация: Ноя 2010

17 Января 2012 00:09

Дмитрий Сорокин,

Цитата
я являюсь менеджером SEO специалиста

Если вы про подпись.

ov3rdoc

Сообщений: 515 Регистрация: Ноя 2010

17 Января 2012 00:10

Редикт - это перенаправление, как мне известно.

Дмитрий Сорокин

Сообщений: 2729 Регистрация: Мар 2010

#10

17 Января 2012 00:12

Понял, сори. Если можно, сайт в личку, проверю точно какой роботс нужен

Дмитрий Сорокин

Сообщений: 2729 Регистрация: Мар 2010

#11

17 Января 2012 00:26

Только что проверил через http://webmaster.yandex.ua/robots.xml , что скорректировав код таким образом

User-agent: *
Disallow: /*/go/
Disallow: /administrator/

нарушений синтаксиса не наблюдается, значит скоро поисковик проиндексирует роботс и выплюнет лишние страницы, так что это точно нужный вам код.

Для ускорения удаления страниц из индекса, это можно сделать вручную

ov3rdoc

Сообщений: 515 Регистрация: Ноя 2010

#12

17 Января 2012 00:29

Дмитрий Сорокин, Огромное вам спасибо.
Тему можно закрыть.

naribalky

Сообщений: 3196 Регистрация: Апр 2011

#13

17 Января 2012 07:50

Тему закрыл.

Prapovednik

Модератор

Сообщений: 65725 Регистрация: Мар 2010

#14

16 Мая 2013 08:43

Так как тема давно закрыта -> перенёс в раздел "Х".

Код
Для повышения Вашей безопасности прошу посетить тему указанную ниже

ч.1 Конкурс "Антимошенник": есть ли смысл в его проведении?
Конкурс с денежным вознаграждением несколько тысяч рублей

Продвигай сайты ЛЮБОЙ тематики! Вечные ссылки и статьи.
*
Тренды SEO 2026: Как продвигать сайт и сделать его магнитом для посетителей (и поисковиков в придачу)

16.05.2016 11:24	Вопрос ко всем
29.02.2016 13:00	Вопросик
25.01.2016 15:41	Вопрос от Новичка
09.01.2016 23:31	Вопрос и мнения о ссылках
04.12.2015 19:20	Вопрос по редиректам в вордпрес

Новые темы	Объявления	Свободное общение
15:27 С чего сейчас проще начать? 15:22 Всем привет! 15:19 adsense в 2026: кто реально выводит копейку через киргизию? 15:10 ПС Baidu захватит мир! надевайте тазики 15:09 AI под надзором. Минцифры готовят клеймо для контента 14:57 Бесплатное получение бэклинков 14:50 Биржи ссылок в 2026 - реально ли новичку с одним сайтом поднять копейку?	15:05 Mixmasters - Exchange without AML and KYC 13:11 SpeedyIndex - ускорение индексирования ссылок в Google. 100 ссылок в подарок. 11:11 Продвижение YouTube видео в топ поиска \| Любой тип контента \| Гарантия результата 11:11 Trustpilot Reviews \| Подниму рейтинг вашей компании 11:11 №1 Рассылка / Инвайтинг [TELEGRAM] \| Приватный метод 11:10 Установка\|Настройка\|Доработка\|Наполнение сайтов\|Дизайн\|3D\|Видеомонтаж 10:51 От $0.015 за IP \| $0.68 за ГБ \| 9PROXY.COM \| 20+ млн резидентных прокси \| 99,95% аптайм \| Без чёрных списков	15:12 Огородники 14:35 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 13:41 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 13:02 С юмором по жизни! 05:10 Точные прогнозы на футбол 16:47 Какой фильм вы любите посмотреть перед сном? 15:46 молодильные яблоки и живая вода