Сегодня в гугле зашел новый сайт в индекс. Но одно меня очень удивило!

Сообщений: 1305 Регистрация: Май 2012

27 Августа 2012 11:58

Когда смотрел страницы, которые приндексировал Гугл заметил, что многие теги и прочие страницы типа rss, архив попал в индекс, хотя в robots.txt я запретил их индексацию. Но под ними выбрасывает такой запрос:
"Опис цього результату недоступний. Причина – файл robots.txt цього сайту. Докладніше."
Раньше такого вроде я не видел на других своих сайтах, это нормально?

Лучшая биржа контента

Иванов Иван

Сообщений: 323 Регистрация: Окт 2010

27 Августа 2012 12:04

Да, нормально Гуглу часто плевать на роботс...

Антон Усов

Сообщений: 1305 Регистрация: Май 2012

27 Августа 2012 12:07

Цитата
Иванов Иван пишет: Да, нормально Гуглу часто плевать на роботс...

Да, я вспомнил, по началу он тупит долго. Потом перестает закидать.

Arte

Сообщений: 1458 Регистрация: Янв 2011

27 Августа 2012 13:18

У меня на сайте через фрейм на одной странице выводится телепрограмма со скрипта. Папка скрипта и все страницы закрыты роботом. Но гуглу пошарабаново. Он постоянно индексирует, после выплевывает. И скачки страниц получаются почти каждый месяц "+" "-" 1000.
И уникальность получается от 3-70%

Изменено: Arte - 27 Августа 2012 13:19

Лучший хостинг - недорогие услуги хостинга, VPS/VDS.

Размещу ваши тематические статьи "Услуги" бесплатно. ТИЦ 20 PR2

JOK3R

Сообщений: 7396 Регистрация: Окт 2011

27 Августа 2012 13:20

Отключи, этот бестолковый RSS, от него толку как от собаки на сене. Туда только бабки старые регистрируются и подписываются, которые не могут определится что им в жизни нужно smile:)

Оптимизация сайтов - Заказать!
У тебя пропали позиции? Сайт в АГС? Нету посещений? Позиции калл? Пиши мне!

Arte

Сообщений: 1458 Регистрация: Янв 2011

27 Августа 2012 13:22

Цитата
JOK3R пишет: Отключи, этот бестолковый RSS

А кто упоминал про RSS

JOK3R

Сообщений: 7396 Регистрация: Окт 2011

27 Августа 2012 13:25

Цитата
Arte пишет: А кто упоминал про RSS

Цитата
Антон Усов пишет: страницы типа rss

Автор темы упоминал в своем первом посте.

Антон Усов

Сообщений: 1305 Регистрация: Май 2012

27 Августа 2012 13:27

Цитата
JOK3R пишет: Отключи, этот бестолковый RSS, от него толку как от собаки на сене. Туда только бабки старые регистрируются и подписываются, которые не могут определится что им в жизни нужно

Это само-собой...
Просто сайт новый, я не думал что его так быстро гугл проиндексирует.

Arte

Сообщений: 1458 Регистрация: Янв 2011

27 Августа 2012 13:28

Тогда необращать внимания, они сами выпадут, хотя может это будет и долго.

JOK3R

Сообщений: 7396 Регистрация: Окт 2011

#10

27 Августа 2012 13:29

Новье то чего бы не проиндексировать. Подожди пару месяцев, будешь ещё ходить клянчить, проиндексировать smile:)

Kuzja

Сообщений: 77 Регистрация: Авг 2012

#11

27 Августа 2012 13:31

Гугл умудряется приветственную заставку cms индексировать в процессе переноса сайта с локалки на сервер smile:)

Антон Усов

Сообщений: 1305 Регистрация: Май 2012

#12

27 Августа 2012 13:33

Цитата
Kuzja пишет: Гугл умудряется приветственную заставку cms индексировать в процессе переноса сайта с локалки на сервер

Ха, смешно))))))))
Лучше бы так старался страницы новые искать))))

TBT Сообщений: 61 Регистрация: Авг 2012	#13 27 Августа 2012 13:35 Чтобы закрыть страницу от индексации лучше в head прописать это "<meta name="robots" content="none" />", он это любит и понимает

13.09.2018 06:29	Гугл ревнует к Яндексу? Или почему низкие позиции в Гугле?
17.08.2018 12:51	Чо там, счетчик на Яндекс метрики сегодня?
11.08.2018 12:52	Вопрос по продвижению в гугле
03.09.2017 10:53	Проверка позиций в яндексе и гугле
05.08.2017 14:25	перевел вчера сайт с http на https. сегодня на сy-pr.com в анализе не видит сайт. помогите

Новые темы	Объявления	Свободное общение
21:31 Всем привет! 20:37 Яндекс-ап 20 марта и похороны ChatGPT, Claude и Gemini. Считаем убытки 14:06 Слипание слов в блоке 14:02 APK на паузе. Google убивает быстрый конверт 11:34 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 19:37 Xrumer-полезный софт или нет? 17:26 AI под надзором. Минцифры готовят клеймо для контента	08:54 Monitex: Мониторинг с кэшбэком 80% в USDT 05:07 От $0.015 за IP \| $0.68 за ГБ \| 9PROXY.COM \| 20+ млн резидентных прокси \| 99,95% аптайм \| Без чёрных списков 23:14 E-currency.exchange — ваш помощник в мире обменов 22:34 UltraXchina: Современный сервис обмена Alipay, USDT, Наличные 17:33 Продам жирный аккаунт fl.ru 17:25 Подключение к API слотов! Connecting to the slots API! 14:10 Авито аккаунты ИП и физик	01:47 Точные прогнозы на футбол 21:02 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 17:45 молодильные яблоки и живая вода 15:04 Сайты Рунета 08:52 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 20:23 Панель Кнопки соцсетей 14:03 Огородники