Как "убрать" свой сайт из инета

Как "убрать" свой сайт из инета, на время

Сообщений: 240 Регистрация: Окт 2011

8 Января 2012 22:46

У меня такой вопрос возник... Купил пяток сайтов на InstantCMS. Продавец залил их мне на хостинг. Там контент в основном из соц сетей. А новости и статьи - копипаст. Так вот, я хотел переделать статейки (отрерайтить), чтобы не было санкций от ПС и сайты жили долго и счастливо smile:)

Какое у Вас мнение по данному вопросу?
Сайты еще не индексировались. Как быстро и просто убрать их из поиска, пока не отрерайчу тексты? Если стереть DNS у доменов, ПС не увидят сайты?

Все мои сайты на продажу Выбор на любой вкус и бюджет!

От этого хостинга я просто в восторге!

KylukovAV

Сообщений: 1276 Регистрация: Май 2011

8 Января 2012 22:52

Быстро не получится особенно с гуглом
закрыть робот и ждать когда они пропадут из индекса, в гугле их вроде слышал в ручную нужно удалять что бы ускорить процес

quallcom

Сообщений: 530 Регистрация: Июн 2010

8 Января 2012 22:53

создайте файл robots.txt, а если уж он существует пропишите в нем

Код
User-agent: Yandex Disallow: / User-agent: * Disallow: /

Цитата
SuperDivX пишет: Если стереть DNS у доменов, ПС не увидят сайты?

и Вы тоже к нему не будете иметь доступа, плохой вариант - за долгое отсутствие доступа к сайту ПС могут выкинуть его из индекса

Хостинг: $1 1ГБ 10 сайтов

SuperDivX

Сообщений: 240 Регистрация: Окт 2011

8 Января 2012 22:55

Цитата
KylukovAV пишет: Быстро не получится особенно с гуглом закрыть робот и ждать когда они пропадут из индекса, в гугле их вроде слышал в ручную нужно удалять что бы ускорить процес

Так сайтам пару дней отроду. У 4-х нет ни одной страницы в индексе... Убрать на время DNS не поможет?

SuperDivX

Сообщений: 240 Регистрация: Окт 2011

8 Января 2012 22:58

quallcom, Спасибо, так и сделаю

SuperDivX

Сообщений: 240 Регистрация: Окт 2011

8 Января 2012 23:08

А файл robots.txt должен в корне лежать?

quallcom

Сообщений: 530 Регистрация: Июн 2010

8 Января 2012 23:13

да, он должен быть доступен по адресу хттп://вашсайт.ру/robots.txt

SuperDivX

Сообщений: 240 Регистрация: Окт 2011

8 Января 2012 23:21

quallcom,
и в нем достаточно 4-х строк, которые Вы указали выше?

quallcom

Сообщений: 530 Регистрация: Июн 2010

8 Января 2012 23:25

да, положить файл robots.txt в корень каждого сайта
но! сохраните robots.txt который был раньше для каждого из сайтов, и после внесенных изменений скопируйте его снова в корень каждого сайта ( старый robots.txt для InstantCMS запрещает индексирование дублей страниц ..)

dima2.0

Сообщений: 232 Регистрация: Ноя 2011

#10

8 Января 2012 23:25

да, это полностью запретит роботам индексиовать сайт

SuperDivX

Сообщений: 240 Регистрация: Окт 2011

#11

8 Января 2012 23:32

Цитата

quallcom пишет:
да, положить файл robots.txt в корень каждого сайта
но! сохраните robots.txt который был раньше для каждого из сайтов, и после внесенных изменений скопируйте его снова в корень каждого сайта ( старый robots.txt для InstantCMS запрещает индексирование дублей страниц ..)

А вот robots.txt изначально и не было на сайтах... А что нужно прописать для запрета индексирования дублей?

quallcom

Сообщений: 530 Регистрация: Июн 2010

#12

8 Января 2012 23:36

как бы robots.txt существуют для каждой cms они запрещают индексирование страниц тегов, страниц версия для печати, то есть тех страниц которые не полезны для поисковых систем. Если robots.txt отсутствует то ПС проиндексируют все страницы, появится много дублей

Цитата
А что нужно прописать для запрета индексирования дублей?

поищите файл robots.txt для Вашей cms, с этой cms не работал.
как вариант, скачайте дистрибутив с офф. сайта и посмотрите какой там файл robots.txt

Изменено: quallcom - 8 Января 2012 23:38

Похожие темы:

21.01.2021 10:59	Как убрать дублирование главной
05.12.2020 12:58	Как убрать дубли главной
30.06.2019 02:17	Как убрать защиту Goolgle (авторизация на сайте)
31.08.2018 12:16	Как убрать отступы в блоках рекламы
02.06.2018 16:54	Убрать блокирующий css... Как же это?

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
19:04 SEO под нейро 17:20 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 17:16 [AI] 90% против нейросетей? Красивые цифры от DuckDuckGo (с подвохом) 17:05 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing 16:28 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 13:51 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 12:51 Гугл официально убивает клики: кнопка "Show more" теперь открывает чат на весь экран вместо сайтов	20:20 Mixmasters - Exchange without AML and KYC 17:22 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram 16:49 Nexulume.com Обменник без AML и KYC 15:35 Продам базу данных предприятий Украины, России, Великобритании, Германии, Испании, Италии, Нидерландов, Польши, Франции, Швейцарии и др. 11:12 AllCharge.online. Современный, быстрый и надёжный обменник 04:08 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 20:58 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств	21:37 Точные прогнозы на футбол 19:06 Отвратительное поведение 19:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 15:56 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 12:48 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 11:00 Кто может дать инвайт на WebMasters? 17:58 Список обновленных тем пуст...