Роботс - стоит ли дисаловить ?

Сообщений: 70 Регистрация: Окт 2015

28 Декабря 2015 16:27

Всем добрый вечер!
Сегодня зачастил с постами, накопилось много вопросов за последний месяц...

Disallow: /*?manufacturer
Disallow: /*?keyword
Насколько понимаю, это закрытие производителя и ключей для индексации, нужно ли их закрывать?

И что закрывают нижеописанные строки?

Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=

И вообще стоит ли открывать роботс, если сайт еще не наполнен и там все данные шаблонные?

Изменено: Evgen Marchenko - 28 Декабря 2015 16:51

Belka

Сообщений: 688 Регистрация: Апр 2010

29 Декабря 2015 11:33

Не стоило бы в стадии наполнения с шаблонными данными. На конкретном шаблоне много таких "быстро открывшихся". Сами понимаете, как поисковики могут отнестись к персонально вашему. В остальном правильно.
За образец:

Код

User-agent: *
 Disallow: /*route=account/
 Disallow: /*route=affiliate/
 Disallow: /*route=checkout/
 Disallow: /*route=product/search
 Disallow: /index.php?route=product/product*&manufacturer_id=
 Disallow: /admin
 Disallow: /catalog
 Disallow: /download
 Disallow: /export
 Disallow: /system
 Disallow: /*?sort=
 Disallow: /*&sort=
 Disallow: /*?order=
 Disallow: /*&order=
 Disallow: /*?limit=
 Disallow: /*&limit=
 Disallow: /*?filter_name=
 Disallow: /*&filter_name=
 Disallow: /*?filter_sub_category=
 Disallow: /*&filter_sub_category=
 Disallow: /*?filter_description=
 Disallow: /*&filter_description=
 Disallow: /*?tracking=
 Disallow: /*&tracking=
 Disallow: /*?page=
 Disallow: /*&page=
 Disallow: /wishlist
 Disallow: /login
 Disallow: /index.php?route=product/manufacturer
 Disallow: /index.php?route=product/compare
 Disallow: /index.php?route=product/category

Закрывают дубли.

Вооружение разных стран Мира.

Лучшие VDS по лучшим ценам.

Дмитрий Потеряев Сообщений: 38 Регистрация: Ноя 2015	#3 29 Декабря 2015 16:54 Сам по себе файл robots.тxт очень мощный файл и при правильной настройке, он дает много пользы, по этому ему нужно уделять не малое внимание. Хорошие подсказки по настройке robots.txt дает Вебмастер гугл, там где вы ставили ваш сайт на поисковую индексацию. Особенно зайдите в раздел "посмотреть как гугл бот" в этом разделе гугл дает хорошие рекомендации о том что нужно открыть для правильной индексации сайта, а так же и закрыть дубли. Создание и продвижение сайтов для всей России, тут многое будет удобным и выгодным для вас http://viront.ru

Новые темы	Объявления	Свободное общение
18:44 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 13:12 Покупные ссылки 12:57 Rotapost прикрыли! Чем пользоваться? 17:00 Стоит ли добавлять сайт в Rambler топ 100? 15:12 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026 15:01 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 07:24 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг	09:15 Все услуги в Телеграм 20:07 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 16:31 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 15:37 Продажа лидов: форекс, инвестиции, нативка, гемблинг, чарджбеки 14:49 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 01:31 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 01:07 Full-Stack Developer — Сайты и Софт любой сложности \| Developer Websites and Soft of any Complexity!	18:35 С юмором по жизни! 22:59 Про мясо 15:07 Добро пожаловать в цифровой мир... 22:12 BYTIK.shop – сервис по продвижению в популярных социальных сетях 10:10 накрутка трафика в SimilarWeb 16:50 Компьютерная мышь 23:03 Точные прогнозы на футбол

Новые темы

Объявления

Свободное общение

18:44 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
13:12 Покупные ссылки
12:57 Rotapost прикрыли! Чем пользоваться?
17:00 Стоит ли добавлять сайт в Rambler топ 100?
15:12 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026
15:01 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
07:24 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг

09:15 Все услуги в Телеграм
20:07 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
16:31 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
15:37 Продажа лидов: форекс, инвестиции, нативка, гемблинг, чарджбеки
14:49 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру
01:31 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника
01:07 Full-Stack Developer — Сайты и Софт любой сложности | Developer Websites and Soft of any Complexity!

18:35 С юмором по жизни!
22:59 Про мясо
15:07 Добро пожаловать в цифровой мир...
22:12 BYTIK.shop – сервис по продвижению в популярных социальных сетях
10:10 накрутка трафика в SimilarWeb
16:50 Компьютерная мышь
23:03 Точные прогнозы на футбол

30.11.2022 10:08	Накрутка ПФ - сколько может стоить?
09.02.2021 10:57	Чего стоит ожидать после изменений процесса идентификации в Яндекс Дзен?
20.01.2021 10:55	Закрытие параметра в роботс
20.10.2018 20:14	Стоит ли выкладывать рекламу в яндекс ?
22.03.2017 14:43	Платон Щукин: Деликатный переезд на https или о чем еще стоит знать