Цитата
cheatforcs пишет: Настройте robots и будет вам счастье

Есть пример правильно настроенного robots?

Страница недоступна
Возможно, страница недоступна или ее сканирование запрещено в файле robots.txt

Если не найдёте решение обратитесь к своему хостеру может помогут мне помогали по многим вопросам

Цитата
ZoRKeG пишет: Сайт реагирует на юзер агент, особенно когда в нём присутствует слово google, может .htaccess настроен не правильно или конфигурация веб сервера , или против гугла

А как и кем настраивается htaccess ? Можно самому или на это есть право только у админ хостинга?

Options +FollowSymLinks
RewriteEngine On

RewriteCond %{HTTP_HOST} ^www.gipsokarton-simferopol.ru\.ru$ [NC]
RewriteRule ^(.*)$ _http://gipsokarton-simferopol.ru/$1 [R=301,L]
RewriteCond %{THE_REQUEST} ^[A-Z]{3,9}\ /index\.html\ HTTP/
RewriteRule ^index\.html$ _http://gipsokarton-simferopol.ru/ [R=301,L]
ErrorDocument 404 /404.html


Такой .htaccess должен подойти (перед http в двух местах нижнее подчеркивание уберите).Host в Robots.txt указывается без http

Цитата

Дмитрий Началов пишет: Цитата Сергей Бойков пишет: Options +FollowSymLinks RewriteEngine On RewriteCond %{HTTP_HOST} ^www.gipsokarton-simferopol.ru\.ru$ [NC] RewriteRule ^(.*)$ _http://gipsokarton-simferopol.ru/$1 [R=301,L] RewriteCond %{THE_REQUEST} ^[A-Z]{3,9}\ /index\.html\ HTTP/ RewriteRule ^index\.html$ _http://gipsokarton-simferopol.ru/ [R=301,L] ErrorDocument 404 /404.html Такой .htaccess должен подойти (перед http в двух местах нижнее подчеркивание уберите).Host в Robots.txt указывается без http Спасибо, но скажите, где и как можно редактировать .htaccess ?

Обычно в корне сайта лежит.