Правильно ли создан роботс

Правильно ли создан роботс, 100-раз спрашивают и я спрошу))

Сообщений: 7178 Регистрация: Дек 2011

17 Января 2012 21:11

Вечер добрый! Подсказали что на моем сайте хреновый роботс, погуглил и пояндексил, подучился чуть и вот создал:

Цитата

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-feed
Disallow: /tag/
Disallow: /category/
Disallow: /search/
Disallow: /author/
Disallow: /wp-comments
Disallow: /archives

User-agent: Googlebot
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-feed
Disallow: /tag/
Disallow: /category/
Disallow: /search/
Disallow: /author/
Disallow: /wp-comments
Disallow: /archives

подскажите правильно или нет? Что добавить, а что убрать если лишнее?
Иэто всё залить в стоку роботс в ВМ?? и всё???(и можно ту жуть стандартные строки с # удалить???)

50 т.р. в месяц на киносайте РЕГИСТРАЦИЯ - обучаю рефералов, в ЛС

Лучшая партнерка - 25 т.р. в месяц РЕГИСТРАЦИЯ

Качественные дешевые статьи КУПИТЬ

admiral

Сообщений: 3 Регистрация: Дек 2011

17 Января 2012 21:30

User-agent: *

и не надо гугль или яшка, это распространяется на все роботы.

Влад Мищенко

Сообщений: 7178 Регистрация: Дек 2011

17 Января 2012 21:33

нет я просто хочу только гошу и яшу

sindoyun

Сообщений: 1301 Регистрация: Ноя 2011

17 Января 2012 21:45

Цитата
Влад Мищенко пишет: нет я просто хочу только гошу и яшу

А остальные поисковики чем тебе не нравятся?

Изменено: sindoyun - 17 Января 2012 21:45

Профессиональный Хостинг по низкой цене

Влад Мищенко

Сообщений: 7178 Регистрация: Дек 2011

17 Января 2012 21:51

дайте я хотя бы в яндекс попаду(из-за этого роботс, АГС выхватил), а с остальных поисковиков(зарубеж 1-5 посетителей, сайт не международный не вижу смысла), mail.ru с гугла выдачу берет, а рамблер(мое мнение), с Яши, так что этого достаточно)

Влад Мищенко

Сообщений: 7178 Регистрация: Дек 2011

17 Января 2012 21:52

И скажет кто нибудь, роботс правильный?

Цитата
Влад Мищенко пишет: Иэто всё залить в стоку роботс в ВМ?? и всё???(и можно ту жуть стандартные строки с # удалить???)

ryudzaki

Сообщений: 461 Регистрация: Янв 2011

17 Января 2012 22:16

Вродь норм, но я бы убрал эту строчку

Цитата
Disallow: /category/

Влад Мищенко

Сообщений: 7178 Регистрация: Дек 2011

17 Января 2012 22:20

Цитата
ryudzaki пишет: Вродь норм, но я бы убрал эту строчку

че так? это ж тоже приведетъ к дублированию страниц по моему???

cstrife

Сообщений: 1642 Регистрация: Ноя 2011

17 Января 2012 23:02

добавь еще строчки
host
sitemap

на счет категорий - вопрос конечно тот еще. На моем сайте они открыты, сайт гороскопов и категории - это знаки зодиака.
а вообще рекомендуют закрывать.
Кстати, про архивы всегда было интересно, а можно ли открыть какой то определенный месяц? к примеру (сейчас февраль) значит июнь и июль прошлого года) думаю дополнять такими строчками не помешает. но это имхо. эксперимент не ставил)

я нармальный, не маньяк, чесна.
пытаюсь поднять сайт о гороскопах csrtife.ru

Влад Мищенко

Сообщений: 7178 Регистрация: Дек 2011

#10

17 Января 2012 23:17

Цитата
cstrife пишет: host

в смысле www.хостинг.ru????

KylukovAV

Сообщений: 1276 Регистрация: Май 2011

#11

17 Января 2012 23:20

Цитата

Влад Мищенко пишет:

Цитата
cstrife пишет: host

в смысле www.хостинг.ru????

Код
Sitemap: http://football-week.ru/sitemap.xml Host: football-week.ru

Влад Мищенко

Сообщений: 7178 Регистрация: Дек 2011

#12

17 Января 2012 23:24

Цитата
Sitemap: http://football-week.ru/sitemap.xml Host: football-week.ru

это ниже роботс вставить и всё???

Изменено: Влад Мищенко - 17 Января 2012 23:24

KylukovAV

Сообщений: 1276 Регистрация: Май 2011

#13

17 Января 2012 23:26

Да обычно ставят в самый низ можно и в самый верх перед User-agent роботу без разницы

Изменено: KylukovAV - 17 Января 2012 23:27

Влад Мищенко

Сообщений: 7178 Регистрация: Дек 2011

#14

17 Января 2012 23:36

а не подскажете куда на wp sitemap залить?(ЧЕРЕЗ РЕДАКТОР В КАКОЙ ШАБЛОН????)

KylukovAV Сообщений: 1276 Регистрация: Май 2011	#15 17 Января 2012 23:43 с WP не работаю но заливают ее в корень сайта туда же где находится ваш робот.тхт

Похожие темы:

23.09.2023 11:44	Правильно ли сделано на сайте?
27.12.2022 15:45	Как правильно перенести статьи на сайт из другого сайта
17.05.2021 17:21	Как правильно сделать seo-анализ сайта?
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
05.12.2020 10:20	Как правильно перенести сайт на международный домен?

Читают тему (гостей: 2, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
14:31 Rotapost прикрыли! Чем пользоваться? 00:23 Раскрутка форума 00:19 Продвижение по ключам 17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 14:07 2Index - быстрая индексация страниц сайта и обратных ссылок 12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 22:23 Подскажите нормальный сервис накрутки ПФ	16:15 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 16:04 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 05:30 CoinCapital 04:22 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 20:30 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 19:53 №1 Рассылка / Инвайтинг [TELEGRAM] \| Приватный метод 19:52 Trustpilot Reviews \| Подниму рейтинг вашей компании	16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники?