Индексация сайта

Сообщений: 1464 Регистрация: Сен 2012

#16

29 Апреля 2013 21:43

Цитата
Coder пишет: А вот Allow - это что-то лишнее, по-моему.

Да что вы говорите, а как же:

Цитата
Чтобы разрешить доступ робота к некоторым частям сайта или сайту целиком, используйте директиву'Allow'

Открой свой магазин за 5 минут, их товары, их обслуживание, с тебя только клиенты >>> РЕГИСТРАЦИЯ <<<
Скрин выплат по запросу.
Рефералам помощь.

ColdPlayer

Сообщений: 152 Регистрация: Мар 2013

#17

29 Апреля 2013 21:49

Я так понимаю надо сделать так?

User-agent: *
Disallow:

Coder

Сообщений: 10708 Регистрация: Мар 2013

#18

29 Апреля 2013 21:50

Цитата
Алексей SP пишет: Да что вы говорите

Логика та, что то, что не запрещено, то разрешено. Поэтому, если запрещения нет, то нечего и разрешать... Можно вообще пустой роботс поставить. И потом, Алексей, я с вами не спорю. Мое мнение таково, и я его обосновал.

✓ Проверенные скрипты и полезности для сайта

✓ Курсы

✓ Сервис временных ссылок

Coder

Сообщений: 10708 Регистрация: Мар 2013

#19

29 Апреля 2013 21:53

Цитата
Я так понимаю надо сделать так?

Чтоб все открыть. Да.

И проверьте в гугл мастере доступ к роботсу.

Изменено: Coder - 29 Апреля 2013 21:59

ColdPlayer

Сообщений: 152 Регистрация: Мар 2013

#20

29 Апреля 2013 22:01

Написал в тех. поддержку самому поменять его нельзя.

Coder

Сообщений: 10708 Регистрация: Мар 2013

#21

29 Апреля 2013 22:03

Цитата
ColdPlayer пишет: самому поменять его нельзя

Тогда, наверное, они только то, что сами считают нужным, записывают...

Алексей SP

Сообщений: 1464 Регистрация: Сен 2012

#22

29 Апреля 2013 22:25

Цитата
ColdPlayer пишет: Написал в тех. поддержку самому поменять его нельзя.

Самому менять можно, достаточно иметь доступ к хостингу сайта, это первое.
И второе, не нужно спешить, для начала продумайте что вам нужно в индексе, а что не нужно, потом это ненужное пропишите в роботсе, а потом уже меняйте его.

Новые темы	Объявления	Свободное общение
11:07 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 06:34 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 01:09 Yahoo Scout: Нейро-привет из склепа. Реальный шанс на траф или мимо? 17:33 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 15:14 Апдейт Яндекса 7 февраля. Пока серп трясет, некоторые по ботам плачут 15:10 Google Discover Core Update: Дискавер отделяют от поиска? 11:30 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией?	08:58 Мониторинг обменников Сrypto-scout.io 04:09 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 02:31 Профессиональный и грамотный дизайн от DesignCash 18:27 Nexulume.com Обменник без AML и KYC 15:45 Mixmasters - Exchange without AML and KYC 10:22 Swapwatch.org — Мониторинг криптовалютных обменников 10:19 SwapPix.io - быстрый и безопасный обменник криптовалют.	08:50 Гильотина для классиков: Клод доедает физические книги 08:40 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 05:10 Точные прогнозы на футбол 18:34 Ставки на супер тренды в спорте 11:10 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко

Новые темы

Объявления

Свободное общение

11:07 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?
06:34 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках
01:09 Yahoo Scout: Нейро-привет из склепа. Реальный шанс на траф или мимо?
17:33 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов
15:14 Апдейт Яндекса 7 февраля. Пока серп трясет, некоторые по ботам плачут
15:10 Google Discover Core Update: Дискавер отделяют от поиска?
11:30 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией?

08:58 Мониторинг обменников Сrypto-scout.io
04:09 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
02:31 Профессиональный и грамотный дизайн от DesignCash
18:27 Nexulume.com Обменник без AML и KYC
15:45 Mixmasters - Exchange without AML and KYC
10:22 Swapwatch.org — Мониторинг криптовалютных обменников
10:19 SwapPix.io - быстрый и безопасный обменник криптовалют.

08:50 Гильотина для классиков: Клод доедает физические книги
08:40 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе
05:10 Точные прогнозы на футбол
18:34 Ставки на супер тренды в спорте
11:10 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось?
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес
13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко

01.02.2026 07:19	SEO-инструменты слепнут: Ahrefs и Semrush массово банят на сайтах из-за ИИ
20.06.2025 14:50	Какую выбрать тему/нишу для сайта?
27.02.2025 08:07	Как собрать все url страниц сайта?
28.05.2024 09:35	Смена струкуры URL сайта плохо для SEO?
18.03.2024 16:58	Переходы по ссылкам на сайтах