Вопрос по Robots.txt

[ Закрыто ] Вопрос по Robots.txt

Сообщений: 515 Регистрация: Ноя 2010

16 Января 2012 23:05

Здравствуйте!
Возможно ли в Robots закрыть страницы, содержащие в адресе элемент /go/.
Например:
site.ru/darkorbit/go/speedhack-darkorbit
site.ru/cs-source/go/-wh-css-v64-steam
и т.д.
Статьи раньше были через этот элемент /go/, сейчас все статьи выходят без него.
Так же верхние примеры доступны по нормальной ссылке:
site.ru/darkorbit/speedhack-darkorbit
site.ru/cs-source/-wh-css-v64-steam
Но и с /go/ так-же прекрасно открываются.
Получаются дубли страниц, они совсем не нужны...

Дмитрий Сорокин

Сообщений: 2729 Регистрация: Мар 2010

16 Января 2012 23:46

User-agent: *
Disallow: /go/

ov3rdoc

Сообщений: 515 Регистрация: Ноя 2010

16 Января 2012 23:50

Цитата
Дмитрий Сорокин пишет: User-agent: * Disallow: /go/

Всё так просто? smile:)

KylukovAV

Сообщений: 1276 Регистрация: Май 2011

16 Января 2012 23:53

go это у вас что редикет?, если да то Дмитрий Сорокин правильно написал

Дмитрий Сорокин

Сообщений: 2729 Регистрация: Мар 2010

16 Января 2012 23:57

Цитата
ov3rdoc пишет: Всё так просто?

Возможно ошибся, если сайт имеет структуру

Код
site.ru/darkorbit/go/speedhack-darkorbit site.ru/cs-source/go/-wh-css-v64-steam

то кажется нужно так

Код
User-agent: * Disallow: /*/go/

ov3rdoc

Сообщений: 515 Регистрация: Ноя 2010

17 Января 2012 00:01

KylukovAV,
В joomla 1.5, в стандартном SEF ссылки имеют вид сайт/категория/раздел/статья.
Т.К. Категории и разделы у меня назывались одинаково ссылки были вида сайт/супы/супы/борщ. Это так к примеру. Решил сделать псевдоним ко всем разделам "go", получилось что-то вроде сайт/супы/go/борщ. В скором времени решил проблему и теперь статьи вида сайт/супы/борщ, но в индексе ПСов остались некоторые страницы вида сайт/супы/go/борщ. И сама страница открывается и по этому адресу. Вот не знаю можно ли это назвать "редикетом"...

Дмитрий Сорокин

Сообщений: 2729 Регистрация: Мар 2010

17 Января 2012 00:07

Цитата
ov3rdoc пишет: Вот не знаю можно ли это назвать "редикетом"...

Вы оптимизатор или кто, что не знаете таких елементарных вещей?

ov3rdoc

Сообщений: 515 Регистрация: Ноя 2010

17 Января 2012 00:09

Дмитрий Сорокин,

Цитата
я являюсь менеджером SEO специалиста

Если вы про подпись.

ov3rdoc

Сообщений: 515 Регистрация: Ноя 2010

17 Января 2012 00:10

Редикт - это перенаправление, как мне известно.

Дмитрий Сорокин

Сообщений: 2729 Регистрация: Мар 2010

#10

17 Января 2012 00:12

Понял, сори. Если можно, сайт в личку, проверю точно какой роботс нужен

Дмитрий Сорокин

Сообщений: 2729 Регистрация: Мар 2010

#11

17 Января 2012 00:26

Только что проверил через http://webmaster.yandex.ua/robots.xml , что скорректировав код таким образом

User-agent: *
Disallow: /*/go/
Disallow: /administrator/

нарушений синтаксиса не наблюдается, значит скоро поисковик проиндексирует роботс и выплюнет лишние страницы, так что это точно нужный вам код.

Для ускорения удаления страниц из индекса, это можно сделать вручную

ov3rdoc

Сообщений: 515 Регистрация: Ноя 2010

#12

17 Января 2012 00:29

Дмитрий Сорокин, Огромное вам спасибо.
Тему можно закрыть.

naribalky

Сообщений: 3196 Регистрация: Апр 2011

#13

17 Января 2012 07:50

Тему закрыл.

Prapovednik

Модератор

Сообщений: 65427 Регистрация: Мар 2010

#14

16 Мая 2013 08:43

Так как тема давно закрыта -> перенёс в раздел "Х".

Код
Для повышения Вашей безопасности прошу посетить тему указанную ниже

ч.1 Конкурс "Антимошенник": есть ли смысл в его проведении?
Конкурс с денежным вознаграждением несколько тысяч рублей

Продвигай сайты ЛЮБОЙ тематики! Вечные ссылки и статьи.
*
Тренды SEO 2026: Как продвигать сайт и сделать его магнитом для посетителей (и поисковиков в придачу)

Похожие темы:

16.05.2016 11:24	Вопрос ко всем
29.02.2016 13:00	Вопросик
25.01.2016 15:41	Вопрос от Новичка
09.01.2016 23:31	Вопрос и мнения о ссылках
04.12.2015 19:20	Вопрос по редиректам в вордпрес

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
16:04 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 11:48 Google - шантажист, а Cloudflare - не спаситель. Как не отлететь в бан 11:47 Старые кости или свежее мясо? Как нагнуть старичка в серпе за один год 11:45 10.02 Яндекс штормит, а Google лезет в долги: 15 миллиардов на железки для ИИ 20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?	04:08 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 02:11 Crypto Mixer ↔ Bitcoin Mixer ↔ Cryptocurrency tumbler ↔ No-AML 20:15 Nexulume.com Обменник без AML и KYC 17:47 Продажа аккаунтов HH.RU 17:06 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 16:53 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 12:59 Mixmasters - Exchange without AML and KYC	01:00 Точные прогнозы на футбол 21:50 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 21:25 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 20:54 Туалетные секреты: Замурчательная тема 17:44 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 15:24 Сайты Рунета 15:22 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось?