Файл robots.txt содержит директиву, запрещающую роботу Яндекса индексирование этого документа. Чтобы робот мог проиндексировать документ, удалите запрещающую директиву.
Как ее определить и удалить?
Как ее определить и удалить?
Файл robots.txt содержит директиву, запрещающую роботу Яндекса
Файл robots.txt содержит директиву, запрещающую роботу Яндекса
|
#1
23 Сентября 2011 22:35
|
|
#2
23 Сентября 2011 22:44
Разве в вебмастере не прописыват строку?
|
|
#3
23 Сентября 2011 22:50
Внимание! Убедитесь, пожалуйста, что страницы, содержащие персональные данные ваших пользователей, закрыты от индексации директивой Disallow. |
|
#4
24 Сентября 2011 00:59
То serjoo объясните что вы хотите.
|
|
#5
24 Сентября 2011 06:48
serjoo,
User-agent: Yandex Disallow: / полный запрет индексации Яндексом (или перечислите какие папки здесь нужно закрыть.) User-agent: * Disallow: / (для других поисковиков) Host: www.site.ru |
|
#6
24 Сентября 2011 12:57
Смотри как составляется http://zonakms.ru/stati/robottxt.html
Изменено:
Александр Гладун - 24 Сентября 2011 13:01
|
|
#7
24 Сентября 2011 14:14
В первую очередь хотелось бы узнать, что за движок Вы используете, м !?
|
|
#8
24 Сентября 2011 15:38
вордпресс |
|
#9
24 Сентября 2011 15:47
C вас вытягивать нужно? А ваш роботс на данный момент можете написать или домен? |
|
#10
24 Сентября 2011 16:19
получается что нужно, я не шарю, сори User-agent: * Crawl-delay: 4 Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow: */feed Disallow: /*?* User-agent: Yandex Crawl-delay: 4 Disallow: /cgi-bin Disallow: /wp-admin Disallow: /wp-includes Disallow: /wp-content/plugins Disallow: /wp-content/cache Disallow: /wp-content/themes Disallow: /trackback Disallow: */trackback Disallow: */*/trackback Disallow: */*/feed/*/ Disallow: */feed Disallow: /*?* Host: домен.ru Sitemap: http://домен.ru/sitemap.xml.gz Sitemap: http://домен.ru/sitemap.xml
Изменено:
serjoo - 24 Сентября 2011 16:21
|
|||||||
Похожие темы:
| 05.12.2020 10:26 | Как правильно закрыть категорию в robots.txt |
| 24.11.2020 14:09 | Ссылка с pdf файла на сайте.. Стоит ли? |
| 07.04.2020 01:55 | SEO, WP медиафайлы- картинки, вредят? |
| 24.11.2019 18:31 | sitemap и robots.txt |
| 29.07.2018 17:42 | Запрет страниц в файле robots.txt |
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Апдейты
- Яндекс ИКС
23.12.2025 (40 дней назад) - Яндекс выдача
01.02.2026 (сегодня)
Доска объявлений
Купить / Продать
Работа / Услуги
Интересные темы
Интернет новости
Инструменты