Яндекс ввёл изменения в ROBOTS.TXT
Страницы: 1 2 След.
Яндекс ввёл изменения в ROBOTS.TXT
Привет всем , на днях пришло уведомление в панели вебмастера , я толком не понял что на что поменять нужно - помагите кто поймёт!

вот само уведомление:
Уведомляем вас об изменениях в обработке директивы 'Allow' файла robots.txt , с помощью которого вы можете разрешить или запретить индексирование сайта поисковым роботом Яндекса.
По новым правилам, если страница сайта попадает под действие нескольких директив 'Allow' и/или 'Disallow', то будет применяться директива с наибольшей длиной префикса URL. При определении длины префикса спецсимвол '*' не учитывается.
Если на вашем сайте в robots.txt совместно используются директивы 'Allow' и 'Disallow', пожалуйста, проверьте их на соответствие новым стандартам


вот мой robots.txt , что тут именно поменять?!

User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /author
Disallow: */trackback
Disallow: */feed
Disallow: /?s=
Host: kokshetay.ru

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /author
Disallow: */trackback
Disallow: */feed
Disallow: /?s=
Allow: /wp-content/uploads/
Изменено: 333cc333 - 14 Марта 2012 20:45
Цитата
333cc333 пишет:
что тут именно поменять?!
Ничего. Яндекс сделал просто менее жёсткие правила на ограничение индексации.
О сколько нам открытий чудных готовит продвиженья путь:
И Google, сын ошибок трудных, и Yandex, парадоксов друг :)
Дешёвый хостинг для новичков и про
Тогда ясненько) , а кто подскажет - вооЩпе нормальный у меня РОБОТС или нет)
Цитата
333cc333 пишет:
а кто подскажет - вооЩпе нормальный у меня РОБОТС или нет)
У вас сайт на Вордпресс, насколько я понял (это же не сайт из подписи).Тогда непонятно, почему в User-agent: * вы строчку Allow поставили в конец. Лучше её поставить в начало, ибо могут не индексироваться картинки (а вот как раз для яндекса после обновления это уже не важно).
Цитата
Yapy пишет:
У вас сайт на Вордпресс, насколько я понял (это же не сайт из подписи).Тогда непонятно, почему в User-agent: * вы строчку Allow поставили в конец. Лучше её поставить в начало, ибо могут не индексироваться картинки (а вот как раз для яндекса после обновления это уже не важно).
Огромное вам спасибо! да сайт из подписи , он  на Юкозе , это я так всё завуалировал)))
Изменено: 333cc333 - 15 Марта 2012 00:28
Цитата
333cc333 пишет:
да сайт из подписи , он на Юкозе
0_o Тогда почему у вас роботс для ВП? У вас же даже таких директорий нет.
я не в курсе с этим файлом что да как , вот и попросил помощи) А что нужно изменить для Укоза?
Обрезать везде wp?

было так Allow: /wp-content/uploads/
а сделать Allow: /content/uploads/  ?????????????

Друг сказал что вот самый правильный :

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: ucozon.ru
Sitemap:http://адрес сайта/sitemap.xml
Sitemap:http://адрес сайта/sitemap-forum.xml  
Sitemap:http://адрес сайта/sitemap-shop.xml

так ли это? только непойму почему АЛЛОУ нету?
подскажите пожалуйста
Изменено: 333cc333 - 15 Марта 2012 12:46
В этом роботс тхт получается что все что не запрещено (Disallow) можно индексировать.
Цитата
333cc333 пишет:
я не в курсе с этим файлом что да как
Ну и прикол. Вы все это время сидели с робот для ВП, а сайт на юкозе smile:sarc:
и самое интересное всё индексировалось за секунды , только фильм добалю - он уже мне в этот день с ПС народ гонит на него
помоему Allow: уже как бы не пользуются:)
Цитата
bliking пишет:
помоему Allow: уже как бы не пользуются:)

Это как не используется? 0_O
Цитата
333cc333 пишет:
и самое интересное всё индексировалось за секунды , только фильм добалю - он уже мне в этот день с ПС народ гонит на него
Ну всё правильно: у вас были закрыты страницы, которых просто нет, так что эффект был такой же, что роботс просто нет.
Цитата
Yapy пишет:
Ну всё правильно: у вас были закрыты страницы, которых просто нет, так что эффект был такой же, что роботс просто нет.
Походу Юкоз автоматически свой впихивал стандартный . из за не соответствия моего , это я нарыл ковыряясь в форумах ))) я много чего знаю как вебмастер , а вот именно этот нюанс с РОБОТСом пропусти так сказать. Сейчас всё понял и исправил smile:mail:.
стыдобище я smile:(
Изменено: 333cc333 - 15 Марта 2012 23:52
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:23 Раскрутка форума 
00:19 Продвижение по ключам 
17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
14:07 2Index - быстрая индексация страниц сайта и обратных ссылок 
12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
22:23 Подскажите нормальный сервис накрутки ПФ 
09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
20:30 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
19:53 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
19:52 Trustpilot Reviews | Подниму рейтинг вашей компании 
19:52 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата 
19:52 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж 
13:23 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 
13:08 AlwaysMoney - платформа для обмена криптовалют 
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 
20:43 Добро пожаловать в цифровой мир... 
15:59 Про мясо 
23:09 ПП от PMS remote.team - 200$ за команду 
13:28 Компьютерная мышь 
22:55 Ну что, кто куда деваете свои сайты? 
22:34 Используете беспроводные наушники?