мой робот

Сообщений: 172 Регистрация: Авг 2011

21 Сентября 2011 00:53

User-agent: *
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*

User-agent: Yandex
Crawl-delay: 4
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Host: ozdorovlen.ru

Sitemap: http://ozdorovlen.ru/sitemap.xml.gz
Sitemap: http://ozdorovlen.ru/sitemap.xml

Что тут не так?

Boss

Сообщений: 479 Регистрация: Сен 2010

21 Сентября 2011 02:08

А в чем у вас проблема?

Цитата
serjoo пишет: Sitemap: _http://ozdorovlen.ru/sitemap.xml.gz

Зачем?

Disallow: */*/feed/*/
И это как то странно написано. У вас есть следующая строка после этой нормальная.

Изменено: Boss - 21 Сентября 2011 02:10

serjoo

Сообщений: 172 Регистрация: Авг 2011

21 Сентября 2011 09:13

Цитата

Boss пишет:
А в чем у вас проблема?

Цитата
serjoo пишет: Sitemap: _http://ozdorovlen.ru/sitemap.xml.gz

Зачем?
Disallow: */*/feed/*/
И это как то странно написано. У вас есть следующая строка после этой нормальная.

яндекс не индексирует, пишет Файл robots.txt содержит директиву, запрещающую роботу Яндекса индексирование этого документа. Чтобы робот мог проиндексировать документ, удалите запрещающую директиву. Проверить, какие страницы сайта запрещены для индексирования, вы можете в разделе «Анализ robots.txt». какую дерективу нужно удалить?

Новые темы	Объявления	Свободное общение
17:23 SEO под нейро 17:22 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 17:19 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing 15:06 Индексирование страниц в Яндексе 10:51 Плагин ответа 10:24 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 07:19 SEO-инструменты слепнут: Ahrefs и Semrush массово банят на сайтах из-за ИИ	18:48 Продажа аккаунтов HH.RU 16:13 Мониторинг обменников Сrypto-scout.io 15:01 Onechange.me — надежный обменник криптовалют и фиатных средств 14:30 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 21:37 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 14:30 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 12:00 CryptoGraph — Анонимный обмен криптовалют без KYC и AML	17:58 Список обновленных тем пуст... 14:24 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 01:05 Точные прогнозы на футбол 00:20 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 20:11 Ставки на супер тренды в спорте 06:57 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 15:18 Win 10: Три месяца без обновлений. Как полёт? // Переезд на Win 11 или Linux

Новые темы

Объявления

Свободное общение

17:23 SEO под нейро
17:22 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент?
17:19 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing
15:06 Индексирование страниц в Яндексе
10:51 Плагин ответа
10:24 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?
07:19 SEO-инструменты слепнут: Ahrefs и Semrush массово банят на сайтах из-за ИИ

18:48 Продажа аккаунтов HH.RU
16:13 Мониторинг обменников Сrypto-scout.io
15:01 Onechange.me — надежный обменник криптовалют и фиатных средств
14:30 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру
21:37 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust
14:30 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
12:00 CryptoGraph — Анонимный обмен криптовалют без KYC и AML

17:58 Список обновленных тем пуст...
14:24 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко
01:05 Точные прогнозы на футбол
00:20 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем
20:11 Ставки на супер тренды в спорте
06:57 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео?
15:18 Win 10: Три месяца без обновлений. Как полёт? // Переезд на Win 11 или Linux

сегодня, 07:19	SEO-инструменты слепнут: Ahrefs и Semrush массово банят на сайтах из-за ИИ
27.01.2026 21:46	перводчик
26.01.2026 05:40	Кто-то научился фильтровать новых ИИ-ботов? Метрика сходит с ума
25.01.2026 23:21	Раскрутка форума
24.12.2025 09:29	Продвижение по ключам