Вобщем ничего не менял,ничего не делал просто захожу в вебинструменты а там вот такая ошибка.
Роботу Googlebot не удалось просканировать ваш сайт из-за отсутствия доступа к файлу robots.txt.
с яндексом всё в порядке,ошибка эта примерно дней 10 уже,страницы вроде как сканирует,но в десятки раз меньше чем раньше,смотрел как гугл бот тоже всё в норме,но ошибка не пропадает...
Вот роботс
User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /page/
Disallow: /xfsearch/
Host:
sitemap: /sitemap.xml
Повторюсь ещё раз,раньше всё было нормально (роботс не трогал)
Роботу Googlebot не удалось просканировать ваш сайт из-за отсутствия доступа к файлу robots.txt.
с яндексом всё в порядке,ошибка эта примерно дней 10 уже,страницы вроде как сканирует,но в десятки раз меньше чем раньше,смотрел как гугл бот тоже всё в норме,но ошибка не пропадает...
Вот роботс
User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /page/
Disallow: /xfsearch/
Host:
sitemap: /sitemap.xml
Повторюсь ещё раз,раньше всё было нормально (роботс не трогал)
Изменено:
0Bk03 - 1 Мая 2013 16:01

