В яндекс вебмастере появилась табличка в которой написано что якобы robots.txt запрещена индексация сайта. Подскажите в чем проблема
Вот содержимое файла robots.txt
Возможно причина в строке Disallow: /#. И еще посоветуйте что еще можно сделать чтоб теги не индексировались, и архивы. в роботс вроде прописано все а гугл индексирует .
Вот содержимое файла robots.txt
Возможно причина в строке Disallow: /#. И еще посоветуйте что еще можно сделать чтоб теги не индексировались, и архивы. в роботс вроде прописано все а гугл индексирует .
| Код |
|---|
User-agent: * Disallow: /*print Disallow: /user/ Disallow: /backup/ Disallow: /2011/ Disallow: /2012/ Disallow: /2013/ Disallow: /2014/ Disallow: /engine/ Disallow: /language/ Disallow: /templates/ Disallow: /rules.html Disallow: /201*/ Disallow: /upgrade/ Disallow: /uploads/ Disallow: /tags/ Disallow: /tags/*/ Disallow: /tags* Disallow: /# Disallow: /?do=tags Disallow: /cache/ Disallow: /cgi-bin/ Disallow: /page/ Disallow: */page/* Disallow: /autobackup.php Disallow: /admin.php Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?do=pm Disallow: /index.php?do=register Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /*do=lastcomments Disallow: /*do=feedback Disallow: /*do=register Disallow: /*do=lostpassword Disallow: /*do=addnews Disallow: /*do=stats Disallow: /*do=pm Disallow: /statistics.html Disallow: /*action=mobile$ Disallow: /forum/ Host: адрес.ru Sitemap: адрес.ru/sitemap.xml |
Снимок.JPG (32.01 КБ) [ Скачать ]
Изменено:
igor Ustymenko - 14 Апреля 2013 02:10
