Ребят, всем привет. Есть сайт на DLE, я ему сделал качественный робот недавно, чтобы избежать дублей страниц, поправить так скажем оптимизацию. Вскоре обнаружил в яндекс такое сообщение.

Цитата
26.01.2012 у робота Яндекса отсутствовал доступ к сайту, поэтому он не был проиндексирован. Уточните у Вашего хостера, не блокируется ли сейчас IP робота [IP-адрес] на стороне сервера. Если доступ открыт, то сообщение обновится в течение 2–3 дней.

Вот собственно robots. Быть может кто-то увидет ошибку.

Цитата

User-agent: Yandex Disallow: /engine/go.php Disallow: /favorites/ Disallow: /cache/ Disallow: /cgi-bin/ Disallow: /page/ Disallow: */page/* Disallow: /engine/ Disallow: /language/ Disallow: /templates/ Disallow: /uploads/ Disallow: /backup/ Disallow: /tags/ Disallow: /autobackup.php Disallow: /admin.php Disallow: /statistics.html Disallow: /banners/ Disallow: /user/ Disallow: /2011/ Disallow: /2012/ Disallow: /*action=mobile$ Disallow: /do=* Disallow: /*do=* Disallow: /?* User-agent: * Disallow: /engine/go.php Disallow: /favorites/ Disallow: /cache/ Disallow: /cgi-bin/ Disallow: /page/ Disallow: */page/* Disallow: /engine/ Disallow: /language/ Disallow: /templates/ Disallow: /uploads/ Disallow: /backup/ Disallow: /tags/ Disallow: /autobackup.php Disallow: /admin.php Disallow: /statistics.html Disallow: /banners/ Disallow: /user/ Disallow: /2011/ Disallow: /2012/ Disallow: /*action=mobile$ Disallow: /do=* Disallow: /*do=* Disallow: /?* Host: сайт.ru Sitemap: http://сайт.ru/sitemap.xml