гугл упорно индекструет содержимое запрещенное в роботсе
Страницы: 1 2 След.
гугл упорно индекструет содержимое запрещенное в роботсе
Помогите, с сайтом mirege.ru

Уже давно составил роботс - mirege.ru/robots.txt

Но гугл не обращает на него внимание и индексируется всё подряд, хотя в яндексе всё нормально
Лучшая партнерка для файлового трафика !!! Лучший vk message тут (нет пессимизации со стороны Ядекса). Лью на подписки трафик здесь (тихие ребиллы)
Или я то то там неправильно указал?
Попробуйте отдельно прописать для гугла
Спасибо...

А вот я пробовал сделать <meta name="robots" content="noindex">

На страницах, но тоже не помогает
<head>
<meta http-equiv="content-type" content="text/html; charset=windows-1251" />
{refresh}
<title>Переход по внешней ссылке из сайта mirege.ru</title>
</head>

Куда лучше поставить <meta name="robots" content="noindex"> ????????
Цитата
We We пишет:
индексируется всё подряд


Бесполезно , всё равно будет индексировать , даже если разрешить и запретить что то одно ( страница , страницыы ) , то всё равно будет в индексе , фактически запрет не действует глобально ..
Цитата
We We пишет:
Куда лучше поставить <meta name="robots" content="noindex">


После title
Хорошо попробую..

просто уже надоело удалять из индекса страницы редиректа где стоит кликандер.
Изменено: We We - 5 Января 2012 10:21
Уже раз 10 удалял по 100 страниц, хорошо хоть с яндексом всё норм... сайт проиндексировался за 1 час и всё с тех пор норм
Вы не один такой smile:) Меня это тоже достало! smile:(
We We,
Такая же байда smile:mad: Индексирует даже те статьи, которых уже месяц нету на сайте, хотя бывает там каждый день.
Тоже все индексирует smile:rolleyes:
У меня после чистки ненужных страниц и удаления их через иструменты вебмастера не индексирует и все ок
У меня схожая проблема:
В роботсе есть строка Disallow: /user/ , но в Гугле висит тысяча страниц типа www.______.ru/user/jaxjaxDiola/
Запретить регистрацию новых пользователей не могу, но достали спамеры.
Что можно сделать?
Цитата
Soaring11 пишет:
Disallow: /user/


Попробуйте вот так: Disallow: /user/*
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 2, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
18:44 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
13:12 Покупные ссылки 
12:57 Rotapost прикрыли! Чем пользоваться? 
17:00 Стоит ли добавлять сайт в Rambler топ 100? 
15:12 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026 
15:01 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
07:24 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
20:07 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
16:31 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
15:37 Продажа лидов: форекс, инвестиции, нативка, гемблинг, чарджбеки 
14:49 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 
01:31 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 
01:07 Full-Stack Developer — Сайты и Софт любой сложности | Developer Websites and Soft of any Complexity! 
20:42 E-currency.exchange — ваш помощник в мире обменов 
18:35 С юмором по жизни! 
22:59 Про мясо 
15:07 Добро пожаловать в цифровой мир... 
22:12 BYTIK.shop – сервис по продвижению в популярных социальных сетях​ 
10:10 накрутка трафика в SimilarWeb 
16:50 Компьютерная мышь 
23:03 Точные прогнозы на футбол