Как "убрать" свой сайт из инета
Страницы: 1
Как "убрать" свой сайт из инета, на время
У меня такой вопрос возник... Купил пяток сайтов на InstantCMS. Продавец залил их мне на хостинг. Там контент в основном из соц сетей. А новости и статьи - копипаст. Так вот, я хотел переделать статейки (отрерайтить), чтобы не было санкций от ПС и сайты жили долго и счастливо smile:) Какое у Вас мнение по данному вопросу?
Сайты еще не индексировались. Как быстро и просто убрать их из поиска, пока не отрерайчу тексты? Если стереть DNS у доменов, ПС не увидят сайты?
Быстро не получится особенно с гуглом
закрыть робот и ждать когда они пропадут из индекса, в гугле их вроде слышал в ручную нужно удалять что бы ускорить процес
создайте файл robots.txt, а если уж он существует пропишите в нем
Код
User-agent: Yandex
Disallow: /

User-agent: *
Disallow: /

Цитата
SuperDivX пишет:
Если стереть DNS у доменов, ПС не увидят сайты?

и Вы тоже к нему не будете иметь доступа, плохой вариант - за долгое отсутствие доступа к сайту ПС могут выкинуть его из индекса
Цитата
KylukovAV пишет:
Быстро не получится особенно с гуглом
закрыть робот и ждать когда они пропадут из индекса, в гугле их вроде слышал в ручную нужно удалять что бы ускорить процес


Так сайтам пару дней отроду. У 4-х нет ни одной страницы в индексе... Убрать на время DNS не поможет?
quallcom, Спасибо, так и сделаю
А файл robots.txt должен в корне лежать?
да, он должен быть доступен по адресу хттп://вашсайт.ру/robots.txt
quallcom,
и в нем достаточно 4-х строк, которые Вы указали выше?
да, положить файл robots.txt в корень каждого сайта
но! сохраните robots.txt который был раньше для каждого из сайтов, и после внесенных изменений скопируйте его снова в корень каждого сайта ( старый robots.txt для InstantCMS запрещает индексирование дублей страниц ..)
да, это полностью запретит роботам индексиовать сайт
Цитата
quallcom пишет:
да, положить файл robots.txt в корень каждого сайта
но! сохраните robots.txt который был раньше для каждого из сайтов, и после внесенных изменений скопируйте его снова в корень каждого сайта ( старый robots.txt для InstantCMS запрещает индексирование дублей страниц ..)

А вот robots.txt изначально и не было на сайтах... А что нужно прописать для запрета индексирования дублей?
как бы robots.txt существуют для каждой cms они запрещают индексирование страниц тегов, страниц версия для печати, то есть тех страниц которые не полезны для поисковых систем. Если robots.txt отсутствует то ПС проиндексируют все страницы, появится много дублей
Цитата
А что нужно прописать для запрета индексирования дублей?

поищите файл robots.txt для Вашей cms, с этой cms не работал.
как вариант, скачайте дистрибутив с офф. сайта и посмотрите какой там файл robots.txt
Изменено: quallcom - 8 Января 2012 23:38
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
14:31 Rotapost прикрыли! Чем пользоваться? 
00:23 Раскрутка форума 
00:19 Продвижение по ключам 
17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
14:07 2Index - быстрая индексация страниц сайта и обратных ссылок 
12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
22:23 Подскажите нормальный сервис накрутки ПФ 
16:15 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 
16:04 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
05:30 CoinCapital  
04:22 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
20:30 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
19:53 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
19:52 Trustpilot Reviews | Подниму рейтинг вашей компании 
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 
20:43 Добро пожаловать в цифровой мир... 
15:59 Про мясо 
23:09 ПП от PMS remote.team - 200$ за команду 
13:28 Компьютерная мышь 
22:55 Ну что, кто куда деваете свои сайты? 
22:34 Используете беспроводные наушники?