Роботс - стоит ли дисаловить ?

Сообщений: 70 Регистрация: Окт 2015

28 Декабря 2015 16:27

Всем добрый вечер!
Сегодня зачастил с постами, накопилось много вопросов за последний месяц...

Disallow: /*?manufacturer
Disallow: /*?keyword
Насколько понимаю, это закрытие производителя и ключей для индексации, нужно ли их закрывать?

И что закрывают нижеописанные строки?

Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=

И вообще стоит ли открывать роботс, если сайт еще не наполнен и там все данные шаблонные?

Изменено: Evgen Marchenko - 28 Декабря 2015 16:51

Belka

Сообщений: 688 Регистрация: Апр 2010

29 Декабря 2015 11:33

Не стоило бы в стадии наполнения с шаблонными данными. На конкретном шаблоне много таких "быстро открывшихся". Сами понимаете, как поисковики могут отнестись к персонально вашему. В остальном правильно.
За образец:

Код

User-agent: *
 Disallow: /*route=account/
 Disallow: /*route=affiliate/
 Disallow: /*route=checkout/
 Disallow: /*route=product/search
 Disallow: /index.php?route=product/product*&manufacturer_id=
 Disallow: /admin
 Disallow: /catalog
 Disallow: /download
 Disallow: /export
 Disallow: /system
 Disallow: /*?sort=
 Disallow: /*&sort=
 Disallow: /*?order=
 Disallow: /*&order=
 Disallow: /*?limit=
 Disallow: /*&limit=
 Disallow: /*?filter_name=
 Disallow: /*&filter_name=
 Disallow: /*?filter_sub_category=
 Disallow: /*&filter_sub_category=
 Disallow: /*?filter_description=
 Disallow: /*&filter_description=
 Disallow: /*?tracking=
 Disallow: /*&tracking=
 Disallow: /*?page=
 Disallow: /*&page=
 Disallow: /wishlist
 Disallow: /login
 Disallow: /index.php?route=product/manufacturer
 Disallow: /index.php?route=product/compare
 Disallow: /index.php?route=product/category

Закрывают дубли.

Вооружение разных стран Мира.

Лучшие VDS по лучшим ценам.

Дмитрий Потеряев Сообщений: 38 Регистрация: Ноя 2015	#3 29 Декабря 2015 16:54 Сам по себе файл robots.тxт очень мощный файл и при правильной настройке, он дает много пользы, по этому ему нужно уделять не малое внимание. Хорошие подсказки по настройке robots.txt дает Вебмастер гугл, там где вы ставили ваш сайт на поисковую индексацию. Особенно зайдите в раздел "посмотреть как гугл бот" в этом разделе гугл дает хорошие рекомендации о том что нужно открыть для правильной индексации сайта, а так же и закрыть дубли. Создание и продвижение сайтов для всей России, тут многое будет удобным и выгодным для вас http://viront.ru

Новые темы	Объявления	Свободное общение
16:04 LGaming - экосистема и партнерская программа в gambling и betting вертикалях 11:48 Google - шантажист, а Cloudflare - не спаситель. Как не отлететь в бан 11:47 Старые кости или свежее мясо? Как нагнуть старичка в серпе за один год 11:45 10.02 Яндекс штормит, а Google лезет в долги: 15 миллиардов на железки для ИИ 20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?	04:08 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 02:11 Crypto Mixer ↔ Bitcoin Mixer ↔ Cryptocurrency tumbler ↔ No-AML 20:15 Nexulume.com Обменник без AML и KYC 17:47 Продажа аккаунтов HH.RU 17:06 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 16:53 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 12:59 Mixmasters - Exchange without AML and KYC	01:00 Точные прогнозы на футбол 21:50 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 21:25 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 20:54 Туалетные секреты: Замурчательная тема 17:44 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 15:24 Сайты Рунета 15:22 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось?

Новые темы

Объявления

Свободное общение

16:04 LGaming - экосистема и партнерская программа в gambling и betting вертикалях
11:48 Google - шантажист, а Cloudflare - не спаситель. Как не отлететь в бан
11:47 Старые кости или свежее мясо? Как нагнуть старичка в серпе за один год
11:45 10.02 Яндекс штормит, а Google лезет в долги: 15 миллиардов на железки для ИИ
20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией?
20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках
20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?

04:08 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
02:11 Crypto Mixer ↔ Bitcoin Mixer ↔ Cryptocurrency tumbler ↔ No-AML
20:15 Nexulume.com Обменник без AML и KYC
17:47 Продажа аккаунтов HH.RU
17:06 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust
16:53 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно
12:59 Mixmasters - Exchange without AML and KYC

01:00 Точные прогнозы на футбол
21:50 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе
21:25 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео?
20:54 Туалетные секреты: Замурчательная тема
17:44 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес
15:24 Сайты Рунета
15:22 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось?

30.11.2022 10:08	Накрутка ПФ - сколько может стоить?
09.02.2021 10:57	Чего стоит ожидать после изменений процесса идентификации в Яндекс Дзен?
20.01.2021 10:55	Закрытие параметра в роботс
20.10.2018 20:14	Стоит ли выкладывать рекламу в яндекс ?
22.03.2017 14:43	Платон Щукин: Деликатный переезд на https или о чем еще стоит знать