Яндекс ввёл изменения в ROBOTS.TXT
Страницы: 1 2 След.
Яндекс ввёл изменения в ROBOTS.TXT
Привет всем , на днях пришло уведомление в панели вебмастера , я толком не понял что на что поменять нужно - помагите кто поймёт!

вот само уведомление:
Уведомляем вас об изменениях в обработке директивы 'Allow' файла robots.txt , с помощью которого вы можете разрешить или запретить индексирование сайта поисковым роботом Яндекса.
По новым правилам, если страница сайта попадает под действие нескольких директив 'Allow' и/или 'Disallow', то будет применяться директива с наибольшей длиной префикса URL. При определении длины префикса спецсимвол '*' не учитывается.
Если на вашем сайте в robots.txt совместно используются директивы 'Allow' и 'Disallow', пожалуйста, проверьте их на соответствие новым стандартам


вот мой robots.txt , что тут именно поменять?!

User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /author
Disallow: */trackback
Disallow: */feed
Disallow: /?s=
Host: kokshetay.ru

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /author
Disallow: */trackback
Disallow: */feed
Disallow: /?s=
Allow: /wp-content/uploads/
Изменено: 333cc333 - 14 Марта 2012 20:45
Цитата
333cc333 пишет:
что тут именно поменять?!
Ничего. Яндекс сделал просто менее жёсткие правила на ограничение индексации.
О сколько нам открытий чудных готовит продвиженья путь:
И Google, сын ошибок трудных, и Yandex, парадоксов друг :)
Дешёвый хостинг для новичков и про
Тогда ясненько) , а кто подскажет - вооЩпе нормальный у меня РОБОТС или нет)
Цитата
333cc333 пишет:
а кто подскажет - вооЩпе нормальный у меня РОБОТС или нет)
У вас сайт на Вордпресс, насколько я понял (это же не сайт из подписи).Тогда непонятно, почему в User-agent: * вы строчку Allow поставили в конец. Лучше её поставить в начало, ибо могут не индексироваться картинки (а вот как раз для яндекса после обновления это уже не важно).
Цитата
Yapy пишет:
У вас сайт на Вордпресс, насколько я понял (это же не сайт из подписи).Тогда непонятно, почему в User-agent: * вы строчку Allow поставили в конец. Лучше её поставить в начало, ибо могут не индексироваться картинки (а вот как раз для яндекса после обновления это уже не важно).
Огромное вам спасибо! да сайт из подписи , он  на Юкозе , это я так всё завуалировал)))
Изменено: 333cc333 - 15 Марта 2012 00:28
Цитата
333cc333 пишет:
да сайт из подписи , он на Юкозе
0_o Тогда почему у вас роботс для ВП? У вас же даже таких директорий нет.
я не в курсе с этим файлом что да как , вот и попросил помощи) А что нужно изменить для Укоза?
Обрезать везде wp?

было так Allow: /wp-content/uploads/
а сделать Allow: /content/uploads/  ?????????????

Друг сказал что вот самый правильный :

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: ucozon.ru
Sitemap:http://адрес сайта/sitemap.xml
Sitemap:http://адрес сайта/sitemap-forum.xml  
Sitemap:http://адрес сайта/sitemap-shop.xml

так ли это? только непойму почему АЛЛОУ нету?
подскажите пожалуйста
Изменено: 333cc333 - 15 Марта 2012 12:46
В этом роботс тхт получается что все что не запрещено (Disallow) можно индексировать.
Цитата
333cc333 пишет:
я не в курсе с этим файлом что да как
Ну и прикол. Вы все это время сидели с робот для ВП, а сайт на юкозе smile:sarc:
и самое интересное всё индексировалось за секунды , только фильм добалю - он уже мне в этот день с ПС народ гонит на него
помоему Allow: уже как бы не пользуются:)
Цитата
bliking пишет:
помоему Allow: уже как бы не пользуются:)

Это как не используется? 0_O
Цитата
333cc333 пишет:
и самое интересное всё индексировалось за секунды , только фильм добалю - он уже мне в этот день с ПС народ гонит на него
Ну всё правильно: у вас были закрыты страницы, которых просто нет, так что эффект был такой же, что роботс просто нет.
Цитата
Yapy пишет:
Ну всё правильно: у вас были закрыты страницы, которых просто нет, так что эффект был такой же, что роботс просто нет.
Походу Юкоз автоматически свой впихивал стандартный . из за не соответствия моего , это я нарыл ковыряясь в форумах ))) я много чего знаю как вебмастер , а вот именно этот нюанс с РОБОТСом пропусти так сказать. Сейчас всё понял и исправил smile:mail:.
стыдобище я smile:(
Изменено: 333cc333 - 15 Марта 2012 23:52
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
20:31 Яндекс-ап 20 марта и похороны ChatGPT, Claude и Gemini. Считаем убытки 
20:16 APK на паузе. Google убивает быстрый конверт 
20:12 AI под надзором. Минцифры готовят клеймо для контента 
22:32 Gambling Craft - гемблинг по белому 
00:12 XEvil - софт для разгадывания капчи. Бесплатная демо-версия. Привязка к SEO/SMM-софту. 
16:58 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика 
15:38 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
05:40 Купить дедики Абузоустойчивые сервера Аренда сервера Купить dedic Дедик Дешево vps vds сервера дедики на SSD! 
17:48 SellBuycoin.io - надежный проводник в мир обмена криптовалют на фиат и наличные по РФ! 
17:13 Анализ курсов и недежности обменников - Kurs.Expert 
15:29 CactusPay.PRO | Умная платёжная система с выводом в USDT TRC-20 
14:20 Вериф аккаунты АВИТО + платежи 
14:17 Swapwatch.org — Мониторинг криптовалютных обменников 
08:01 HH.ru Работадателя вериф 
00:10 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 
23:52 Сайты Рунета 
20:23 Панель Кнопки соцсетей 
20:09 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 
20:09 Точные прогнозы на футбол 
17:40 молодильные яблоки и живая вода 
14:03 Огородники