И еще подскажите как будет лучше сделать, чтоб яндекс забыл про сайт, а потом через время добавить в индекс, чтоб не было санкций каторые щас уже есть, может бота лучше блокировань на уровне сервера? Кто знает ip диапазон яндекса?)))

Запрет для яндекса:


User-agent: Yandex
Disallow: /


Что бы яндекс забыл про сайт достаточно прописать запрет в robots, но забудет он про него не скоро, возможно странички будут выпадать из индекса пол года, возможно больше

в роботсе прописывается правило, но не жесткий запрет, не факт что сработает

Цитата
Штырлиц пишет: в роботсе прописывается правило, но не жесткий запрет, не факт что сработает

откуда такая информация?
если полностью закрывать в роботс то все работает, а вот если отдельные страницы то тогда с вами согласен

Какой смысл создавать такую тему? 150 раз обсуждалось... Ладно лень искать здесь по форуму, но просто погуглить можно же до создания темы?  _http://www.pixelplus.ru/samostoyatelno/stati/indeks­atsiya/kak-zakryt-sayt-ot-indeksatsii.html

Цитата
p.escobar пишет: как будет лучше сделать, чтоб яндекс забыл про сайт, а потом через время добавить в индекс, чтоб не было санкций каторые щас уже есть

ну это один из самых распространенных и необъяснимых мифов. Забыл, увидел новый - и все здорово!? санкции применятся снова, а если не за что, снимутся существующие и так.