С толкнулся с проблемой выбора файла роботс для блога. В интернете большое количество разных вариантов, но какой из них правильный? На данный момент сделал все по этой pro-wordpress.ru/chast-2-raskrutka-bloga/kak-izbavitsya-ot-dublej-stranic.php]инструкции но вот тут есть опасения хоть и стоит 301 редиректор но робот то открыт полностью, может по мимо этого и в роботсе все закрыть? Мне нужно только что бы записи,изображения и страници были в поиске. Я понимаю что таких тем куча. но я не нашел нормальный фаил роботс. Буду очень признателен если поделиться, и если есть возможность ссылку на сайт где он стоит.
Robots.txt для WordPress - правильная версия.
[ Закрыто ] Robots.txt для WordPress - правильная версия., Что и как?
|
#1
21 Апреля 2015 04:45
|
|
#2
21 Апреля 2015 08:40
40 просмотров и не одного ответа, всем лень писать?
 |
|
#3
21 Апреля 2015 08:52
User-agent: Yandex
Disallow: /cgi-bin Disallow: /wp-admin Disallow: /redirect/ Disallow: /wp-includes Disallow: /wp-content Disallow: /wp-trackback Disallow: /wp-feed Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: /*?utm_source* Disallow: *?utm_medium* Disallow: *?utm_content* Disallow: /*?* Disallow: /*? Disallow: */comments Disallow: /author/* Disallow: /tag/* Disallow: /xmlrpc.php Host: сайт.com User-agent: * Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /redirect/ Disallow: /wp-content Disallow: /wp-trackback Disallow: /wp-feed Disallow: /author/* Disallow: /wp-comments Disallow: */trackback Disallow: */feed Disallow: /*?utm_source* Disallow: *?utm_medium* Disallow: *?utm_content* Disallow: */comments Disallow: /tag/* Disallow: /xmlrpc.php Sitemap: http://сайт.com/sitemap.xml |
|
#4
21 Апреля 2015 10:00
|
|
#5
21 Апреля 2015 12:01
User-agent: *
Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-include Disallow: /wp-register.php Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow: */feed Disallow: /*?* Disallow: /tag Disallow: /page Disallow: */page/* Disallow: /plugins Disallow: /archives Disallow: /author Disallow: /step/..... Disallow: /search/* Disallow: /go Disallow: /goto Disallow: /wp-login.php Disallow: /uploads/ Disallow: /*.gif$ Disallow: /*.jpg$ Disallow: /*.png$ Disallow: /xmlrpc.php Disallow: */comment-page-* Disallow: /comments Disallow: /sample-page Disallow: /?attachment_id Disallow: /*rss User-agent: Mail.ru Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-register.php Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow: */feed Disallow: /*?* Disallow: /tag Disallow: /page Disallow: */page/* Disallow: /plugins Disallow: /archives Disallow: /author Disallow: /go Disallow: /goto Disallow: /step/..... Disallow: /search/* Disallow: /xmlrpc.php Disallow: */comment-page-* Disallow: /comments Disallow: /sample-page Disallow: /wp-login.php Disallow: /uploads Disallow: /?attachment_id User-agent: Yandex Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-register.php Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow: */feed Disallow: /*?* Disallow: /tag Disallow: /page Disallow: */page/* Disallow: /plugins Disallow: /archives Disallow: /author Disallow: /go Disallow: /goto Disallow: /step/..... Disallow: /search/* Disallow: /xmlrpc.php Disallow: */comment-page-* Disallow: /comments Disallow: /sample-page Disallow: /wp-login.php Disallow: /uploads Disallow: /?attachment_id Disallow: /*rss Host: site.site Sitemap: site.site/sitemap.xml Sitemap: site.site/sitemap.xml.gz попробуйте такой вариант
Изменено:
Александр - 21 Апреля 2015 12:09
|
|
#6
21 Апреля 2015 12:11
много разных потому что у каждого свои задачи и настройки сайта разные, Вам дают примеры как закрывать ненужные страницы, конкретно для своего сайта Вы сами должны составить правильный robots.txt, тупо копировать чужие настройки выглядит глупо и смешно  |
|
#7
21 Апреля 2015 12:59
|
|
#8
22 Апреля 2015 17:01
советую почитать официальные мануалы, например этот - https://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml
когда знаешь, как это работает, для любого проекта без проблем составишь роботс |
|
#9
24 Апреля 2015 13:28
|
|
#10
26 Апреля 2015 17:44
Не хотел создать тему, так как мой вопрос тоже связан по роботсу.
Яндекс пишет что страницы закрыты для индексации, посмотрите на мой роботс. Где я закрыл "Страницы". CMS WP
Изменено:
Zeekrewards * - 26 Апреля 2015 17:50
|
|
#11
26 Апреля 2015 18:05
slonikk, utm метки ссылок, но если вы не знаете, что это, значит вы их и не делали, закрывать не надо
|
|
#12
26 Апреля 2015 18:33
|
|
#13
13 Мая 2015 18:35
По просьбе ТС в ЛС
Тему закрыл. * обращение к пользователям - > если Ваша тема потеряла свою актуальность, то, пожалуйста, отпишитесь об этом в теме и скиньте ссылку на тему мне в ЛС. |
||||
Похожие темы:
| 01.05.2025 18:53 | Настройка плагина для wordpress Price Shop |
| 11.04.2025 17:42 | Создание сайтов стало проще: WordPress представляет AI-инструмент |
| 21.03.2025 19:38 | Владельцы сайтов на WordPress под угрозой: как вредонос DollyWay крадёт ваш трафик |
| 08.10.2023 11:09 | Как узнать какая тема wordpress на сайте |
| 10.07.2023 21:49 | Нужно перенести дизайн с фигмы на Wordpress |
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Апдейты
- Яндекс ИКС
23.11.2023 (538 дней назад) - Яндекс выдача
01.04.2025 (43 дня назад)
Доска объявлений
Купить / Продать
Работа / Услуги
Интересные темы
— Ютуб - продвижение и заработок
— Монетизация любого типа контента на YouTube. Adsense больше не нужен!
— Новая акция 2025: Заработай* до 5 432 руб. за пару минут** просто, бесплатно и без смс. Сможет даже новичок
— Баннерообменная бизнес сеть. Заработок без вложений.
— Как лить трафик на беттинг под крикет: 4 шага к профиту
— Монетизация любого типа контента на YouTube. Adsense больше не нужен!
— Новая акция 2025: Заработай* до 5 432 руб. за пару минут** просто, бесплатно и без смс. Сможет даже новичок
— Баннерообменная бизнес сеть. Заработок без вложений.
— Как лить трафик на беттинг под крикет: 4 шага к профиту
Интернет новости
Инструменты