Что добавить в robots.txt

Руслан

Сообщений: 240 Регистрация: Ноя 2011

#31

30 Ноября 2011 12:46

krasti спасибо. Движок на Жумле

http://www.komandor.dn.ua

Comunicom

Сообщений: 46 Регистрация: Сен 2010

#32

8 Апреля 2013 11:30

Добрые сутки всем и приятных дней трудовых! smile:)

Подскажите плиз, что может значит [SIZE=2]содержимое [/SIZE]robots.txt вот в таком виде:
[SIZE=2]# www.robotstxt.org/
# www.google.com/support/webmasters/bin/answer.py?hl=en&answer=156449

User-agent: *
Disallow: /
[/SIZE]

Может ли это быть причиной того, что страницы сайте на индексируются?

За ранее спасибо!

Роман Кихтенко

Сообщений: 221 Регистрация: Июн 2011

#33

8 Апреля 2013 12:03

Цитата
Comunicom пишет: Disallow: /

Чтобы запретить доступ робота к некоторым частям сайта или сайту целиком, используйте директиву 'Disallow'

Как раз у вас и стоит закрыть и главная страница сайт "/" Закрыт полностью сайт для поисковиков

Тут могла быть ваша реклама

Новые темы	Объявления	Свободное общение
11:07 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 06:34 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 01:09 Yahoo Scout: Нейро-привет из склепа. Реальный шанс на траф или мимо? 17:33 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 15:14 Апдейт Яндекса 7 февраля. Пока серп трясет, некоторые по ботам плачут 15:10 Google Discover Core Update: Дискавер отделяют от поиска? 11:30 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией?	02:31 Профессиональный и грамотный дизайн от DesignCash 18:27 Nexulume.com Обменник без AML и KYC 15:45 Mixmasters - Exchange without AML and KYC 10:22 Swapwatch.org — Мониторинг криптовалютных обменников 10:19 SwapPix.io - быстрый и безопасный обменник криптовалют. 15:12 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 12:38 Bankomat001 - Сервис обмена электронных валют	02:08 KRAKEN // ссылка на февраль 2026 00:28 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 23:44 Точные прогнозы на футбол 18:34 Ставки на супер тренды в спорте 15:30 Гильотина для классиков: Клод доедает физические книги 11:10 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес

Новые темы

Объявления

Свободное общение

11:07 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?
06:34 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках
01:09 Yahoo Scout: Нейро-привет из склепа. Реальный шанс на траф или мимо?
17:33 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов
15:14 Апдейт Яндекса 7 февраля. Пока серп трясет, некоторые по ботам плачут
15:10 Google Discover Core Update: Дискавер отделяют от поиска?
11:30 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией?

02:31 Профессиональный и грамотный дизайн от DesignCash
18:27 Nexulume.com Обменник без AML и KYC
15:45 Mixmasters - Exchange without AML and KYC
10:22 Swapwatch.org — Мониторинг криптовалютных обменников
10:19 SwapPix.io - быстрый и безопасный обменник криптовалют.
15:12 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
12:38 Bankomat001 - Сервис обмена электронных валют

02:08 K*R*A*K*EN // ссылка на февраль 2026
00:28 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе
23:44 Точные прогнозы на футбол
18:34 Ставки на супер тренды в спорте
15:30 Гильотина для классиков: Клод доедает физические книги
11:10 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось?
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес

24.08.2022 12:10	Добавить или новый сайт
08.03.2021 21:11	Как добавить группу ключевых слов в одну статью?
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
08.02.2020 05:40	Как лучше добавить русский контент на английскую версию сайта
24.11.2019 18:31	sitemap и robots.txt