мой робот

Сообщений: 172 Регистрация: Авг 2011

21 Сентября 2011 00:53

User-agent: *
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*

User-agent: Yandex
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Host: ozdorovlen.ru

Sitemap: http://ozdorovlen.ru/sitemap.xml.gz
Sitemap: http://ozdorovlen.ru/sitemap.xml

Что тут не так?

Boss

Сообщений: 479 Регистрация: Сен 2010

21 Сентября 2011 02:08

А в чем у вас проблема?

Цитата
serjoo пишет: Sitemap: _http://ozdorovlen.ru/sitemap.xml.gz

Зачем?

Disallow: */*/feed/*/
И это как то странно написано. У вас есть следующая строка после этой нормальная.

Изменено: Boss - 21 Сентября 2011 02:10

serjoo

Сообщений: 172 Регистрация: Авг 2011

21 Сентября 2011 09:13

Цитата

Boss пишет:
А в чем у вас проблема?

Цитата
serjoo пишет: Sitemap: _http://ozdorovlen.ru/sitemap.xml.gz

Зачем?
Disallow: */*/feed/*/
И это как то странно написано. У вас есть следующая строка после этой нормальная.

яндекс не индексирует, пишет Файл robots.txt содержит директиву, запрещающую роботу Яндекса индексирование этого документа. Чтобы робот мог проиндексировать документ, удалите запрещающую директиву. Проверить, какие страницы сайта запрещены для индексирования, вы можете в разделе «Анализ robots.txt». какую дерективу нужно удалить?

Новые темы	Объявления	Свободное общение
00:23 Раскрутка форума 00:19 Продвижение по ключам 17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 14:07 2Index - быстрая индексация страниц сайта и обратных ссылок 12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 22:23 Подскажите нормальный сервис накрутки ПФ 09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг	13:23 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 13:08 AlwaysMoney - платформа для обмена криптовалют 13:11 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 04:05 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 00:56 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 22:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 15:26 TETChange-Обменник криптовалют	16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники?

Новые темы

Объявления

Свободное общение

00:23 Раскрутка форума
00:19 Продвижение по ключам
17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
14:07 2Index - быстрая индексация страниц сайта и обратных ссылок
12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
22:23 Подскажите нормальный сервис накрутки ПФ
09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг

13:23 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру
13:08 AlwaysMoney - платформа для обмена криптовалют
13:11 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
04:05 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
00:56 CryptoGraph — Анонимный обмен криптовалют без KYC и AML
22:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
15:26 TETChange-Обменник криптовалют

16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру
20:43 Добро пожаловать в цифровой мир...
15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь
22:55 Ну что, кто куда деваете свои сайты?
22:34 Используете беспроводные наушники?

вчера, 00:24	Раскрутка форума
вчера, 00:19	Продвижение по ключам
12.09.2025 08:27	Ищу специалистов
10.09.2025 08:12	ру гембла
09.09.2025 09:18	Влияние использования ИИ для написания текстов на позицию в поисковой выдаче