подскажите что это значит robot.txt
Страницы: 1
[ Закрыто ] подскажите что это значит robot.txt, пишет в аудите:
выдает в аудите :
user-agent: *
disallow: /*rout=account/login
disallow: /*rout=checkout/cart
disallow: /admin
disallow: /catalog
disallow: /download
disallow: /export
Закрытие технических страниц от индексации всеми поисковиками
Цитата
RUPak пишет:
Закрытие технических страниц от индексации всеми поисковиками

приветствую знатоков, насколько я понял это НЕ есть хорошо.. а что в данном случае нужно сделать? или хотя так и должно быть?)
Изменено: olympus_center - 3 Ноября 2011 16:36
olympus_center вы ошибаетесь, это как раз хорошо!
Будет лучше, если Вы все технические страницы закроете от индексации!
Потому что данные страницы не несут ни какой смысловой нагрузки!
Цитата
sanek пишет:
olympus_center вы ошибаетесь, это как раз хорошо!
Будет лучше, если Вы все технические страницы закроете от индексации!
Потому что данные страницы не несут ни какой смысловой нагрузки!

огромное спасибо за точный и развернутый ответ, можно закрывать тему
Тему закрыл.
Так как тема давно закрыта -> перенёс в раздел "Х".
Код
Для повышения Вашей безопасности прошу посетить тему указанную ниже

ч.1 Конкурс "Антимошенник": есть ли смысл в его проведении?
Конкурс с денежным вознаграждением несколько тысяч рублей
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
16:04 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 
11:48 Google - шантажист, а Cloudflare - не спаситель. Как не отлететь в бан 
11:47 Старые кости или свежее мясо? Как нагнуть старичка в серпе за один год 
11:45 10.02 Яндекс штормит, а Google лезет в долги: 15 миллиардов на железки для ИИ 
20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 
20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 
20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
04:08 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
02:11 Crypto Mixer ↔ Bitcoin Mixer ↔ Cryptocurrency tumbler ↔ No-AML 
20:15 Nexulume.com Обменник без AML и KYC 
17:47 Продажа аккаунтов HH.RU 
17:06 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 
16:53 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно 
12:59 Mixmasters - Exchange without AML and KYC 
01:00 Точные прогнозы на футбол 
21:50 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 
21:25 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 
20:54 Туалетные секреты: Замурчательная тема 
17:44 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
15:24 Сайты Рунета 
15:22 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось?