Яндекс ввёл изменения в ROBOTS.TXT
Страницы: 1 2 След.
Яндекс ввёл изменения в ROBOTS.TXT
Привет всем , на днях пришло уведомление в панели вебмастера , я толком не понял что на что поменять нужно - помагите кто поймёт!

вот само уведомление:
Уведомляем вас об изменениях в обработке директивы 'Allow' файла robots.txt , с помощью которого вы можете разрешить или запретить индексирование сайта поисковым роботом Яндекса.
По новым правилам, если страница сайта попадает под действие нескольких директив 'Allow' и/или 'Disallow', то будет применяться директива с наибольшей длиной префикса URL. При определении длины префикса спецсимвол '*' не учитывается.
Если на вашем сайте в robots.txt совместно используются директивы 'Allow' и 'Disallow', пожалуйста, проверьте их на соответствие новым стандартам


вот мой robots.txt , что тут именно поменять?!

User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /author
Disallow: */trackback
Disallow: */feed
Disallow: /?s=
Host: kokshetay.ru

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /author
Disallow: */trackback
Disallow: */feed
Disallow: /?s=
Allow: /wp-content/uploads/
Изменено: 333cc333 - 14 Марта 2012 20:45
Цитата
333cc333 пишет:
что тут именно поменять?!
Ничего. Яндекс сделал просто менее жёсткие правила на ограничение индексации.
О сколько нам открытий чудных готовит продвиженья путь:
И Google, сын ошибок трудных, и Yandex, парадоксов друг :)
Дешёвый хостинг для новичков и про
Тогда ясненько) , а кто подскажет - вооЩпе нормальный у меня РОБОТС или нет)
Цитата
333cc333 пишет:
а кто подскажет - вооЩпе нормальный у меня РОБОТС или нет)
У вас сайт на Вордпресс, насколько я понял (это же не сайт из подписи).Тогда непонятно, почему в User-agent: * вы строчку Allow поставили в конец. Лучше её поставить в начало, ибо могут не индексироваться картинки (а вот как раз для яндекса после обновления это уже не важно).
Цитата
Yapy пишет:
У вас сайт на Вордпресс, насколько я понял (это же не сайт из подписи).Тогда непонятно, почему в User-agent: * вы строчку Allow поставили в конец. Лучше её поставить в начало, ибо могут не индексироваться картинки (а вот как раз для яндекса после обновления это уже не важно).
Огромное вам спасибо! да сайт из подписи , он  на Юкозе , это я так всё завуалировал)))
Изменено: 333cc333 - 15 Марта 2012 00:28
Цитата
333cc333 пишет:
да сайт из подписи , он на Юкозе
0_o Тогда почему у вас роботс для ВП? У вас же даже таких директорий нет.
я не в курсе с этим файлом что да как , вот и попросил помощи) А что нужно изменить для Укоза?
Обрезать везде wp?

было так Allow: /wp-content/uploads/
а сделать Allow: /content/uploads/  ?????????????

Друг сказал что вот самый правильный :

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: ucozon.ru
Sitemap:http://адрес сайта/sitemap.xml
Sitemap:http://адрес сайта/sitemap-forum.xml  
Sitemap:http://адрес сайта/sitemap-shop.xml

так ли это? только непойму почему АЛЛОУ нету?
подскажите пожалуйста
Изменено: 333cc333 - 15 Марта 2012 12:46
В этом роботс тхт получается что все что не запрещено (Disallow) можно индексировать.
Цитата
333cc333 пишет:
я не в курсе с этим файлом что да как
Ну и прикол. Вы все это время сидели с робот для ВП, а сайт на юкозе smile:sarc:
и самое интересное всё индексировалось за секунды , только фильм добалю - он уже мне в этот день с ПС народ гонит на него
помоему Allow: уже как бы не пользуются:)
Цитата
bliking пишет:
помоему Allow: уже как бы не пользуются:)

Это как не используется? 0_O
Цитата
333cc333 пишет:
и самое интересное всё индексировалось за секунды , только фильм добалю - он уже мне в этот день с ПС народ гонит на него
Ну всё правильно: у вас были закрыты страницы, которых просто нет, так что эффект был такой же, что роботс просто нет.
Цитата
Yapy пишет:
Ну всё правильно: у вас были закрыты страницы, которых просто нет, так что эффект был такой же, что роботс просто нет.
Походу Юкоз автоматически свой впихивал стандартный . из за не соответствия моего , это я нарыл ковыряясь в форумах ))) я много чего знаю как вебмастер , а вот именно этот нюанс с РОБОТСом пропусти так сказать. Сейчас всё понял и исправил smile:mail:.
стыдобище я smile:(
Изменено: 333cc333 - 15 Марта 2012 23:52
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 2, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
08:50 "Осталось 5 дн. до НГ" АПдейт Яндекс выдача 
08:48 Стоит ли добавлять сайт в Rambler топ 100? 
08:46 С наступающим Новым годом! АП Яндекс ИКС 23.12.2025 
08:36 25.12.25 Апдейт Яндекс выдача 
08:36 Супер-партнерка PayV: избранные офферы в топовых нишах 
08:33 Ссылки с сайтов РБ 
08:11 Волна банов за ПФ под Новый год? Кого еще зацепило? 
10:06 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
08:53 Размещение статей, ссылок и постовых на качественных ресурсах 
08:22 Мониторинг обменников Сrypto-scout.io 
04:17 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
03:54 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram 
19:18 Oblaka.in — Обмен криптовалюты быстро, выгодно и безопасно 
15:32 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
11:18 Стряхнуть обыденность - об Агасфере 
08:42 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
23:08 Физические сим-карты 
22:52 37 противникам прививок от COVID грозят уголовные дела 
21:44 С юмором по жизни! 
13:34 Компьютерная мышь 
13:13 Куплю проигрышные букмекерские аккаунты