Сегодня в гугле зашел новый сайт в индекс. Но одно меня очень удивило!

Сообщений: 1305 Регистрация: Май 2012

27 Августа 2012 11:58

Когда смотрел страницы, которые приндексировал Гугл заметил, что многие теги и прочие страницы типа rss, архив попал в индекс, хотя в robots.txt я запретил их индексацию. Но под ними выбрасывает такой запрос:
"Опис цього результату недоступний. Причина – файл robots.txt цього сайту. Докладніше."
Раньше такого вроде я не видел на других своих сайтах, это нормально?

Лучшая биржа контента

Иванов Иван

Сообщений: 323 Регистрация: Окт 2010

27 Августа 2012 12:04

Да, нормально Гуглу часто плевать на роботс...

Антон Усов

Сообщений: 1305 Регистрация: Май 2012

27 Августа 2012 12:07

Цитата
Иванов Иван пишет: Да, нормально Гуглу часто плевать на роботс...

Да, я вспомнил, по началу он тупит долго. Потом перестает закидать.

Arte

Сообщений: 1458 Регистрация: Янв 2011

27 Августа 2012 13:18

У меня на сайте через фрейм на одной странице выводится телепрограмма со скрипта. Папка скрипта и все страницы закрыты роботом. Но гуглу пошарабаново. Он постоянно индексирует, после выплевывает. И скачки страниц получаются почти каждый месяц "+" "-" 1000.
И уникальность получается от 3-70%

Изменено: Arte - 27 Августа 2012 13:19

Лучший хостинг - недорогие услуги хостинга, VPS/VDS.

Размещу ваши тематические статьи "Услуги" бесплатно. ТИЦ 20 PR2

JOK3R

Сообщений: 7396 Регистрация: Окт 2011

27 Августа 2012 13:20

Отключи, этот бестолковый RSS, от него толку как от собаки на сене. Туда только бабки старые регистрируются и подписываются, которые не могут определится что им в жизни нужно smile:)

Оптимизация сайтов - Заказать!
У тебя пропали позиции? Сайт в АГС? Нету посещений? Позиции калл? Пиши мне!

Arte

Сообщений: 1458 Регистрация: Янв 2011

27 Августа 2012 13:22

Цитата
JOK3R пишет: Отключи, этот бестолковый RSS

А кто упоминал про RSS

JOK3R

Сообщений: 7396 Регистрация: Окт 2011

27 Августа 2012 13:25

Цитата
Arte пишет: А кто упоминал про RSS

Цитата
Антон Усов пишет: страницы типа rss

Автор темы упоминал в своем первом посте.

Антон Усов

Сообщений: 1305 Регистрация: Май 2012

27 Августа 2012 13:27

Цитата
JOK3R пишет: Отключи, этот бестолковый RSS, от него толку как от собаки на сене. Туда только бабки старые регистрируются и подписываются, которые не могут определится что им в жизни нужно

Это само-собой...
Просто сайт новый, я не думал что его так быстро гугл проиндексирует.

Arte

Сообщений: 1458 Регистрация: Янв 2011

27 Августа 2012 13:28

Тогда необращать внимания, они сами выпадут, хотя может это будет и долго.

JOK3R

Сообщений: 7396 Регистрация: Окт 2011

#10

27 Августа 2012 13:29

Новье то чего бы не проиндексировать. Подожди пару месяцев, будешь ещё ходить клянчить, проиндексировать smile:)

Kuzja

Сообщений: 77 Регистрация: Авг 2012

#11

27 Августа 2012 13:31

Гугл умудряется приветственную заставку cms индексировать в процессе переноса сайта с локалки на сервер smile:)

Антон Усов

Сообщений: 1305 Регистрация: Май 2012

#12

27 Августа 2012 13:33

Цитата
Kuzja пишет: Гугл умудряется приветственную заставку cms индексировать в процессе переноса сайта с локалки на сервер

Ха, смешно))))))))
Лучше бы так старался страницы новые искать))))

TBT Сообщений: 61 Регистрация: Авг 2012	#13 27 Августа 2012 13:35 Чтобы закрыть страницу от индексации лучше в head прописать это "<meta name="robots" content="none" />", он это любит и понимает

Похожие темы:

13.09.2018 06:29	Гугл ревнует к Яндексу? Или почему низкие позиции в Гугле?
17.08.2018 12:51	Чо там, счетчик на Яндекс метрики сегодня?
11.08.2018 12:52	Вопрос по продвижению в гугле
03.09.2017 10:53	Проверка позиций в яндексе и гугле
05.08.2017 14:25	перевел вчера сайт с http на https. сегодня на сy-pr.com в анализе не видит сайт. помогите

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
21:37 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 19:27 Плагин ответа 19:20 SEO под нейро 19:16 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 19:13 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 19:10 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing 15:50 Яндекс туда же: "Нейро" отжал 50% первого экрана. Органический трафик падает	01:56 В топ1 за 3-5 дней НЕПФ 00:47 Swapwatch.org — Мониторинг криптовалютных обменников 18:39 SellBuycoin.io - надежный проводник в мир обмена криптовалют на фиат и наличные по РФ! 17:25 SMS.PRO - площадка для продажи твоих номеров 16:14 Все услуги в Телеграм 14:16 Nexulume.com Обменник без AML и KYC 13:43 Anonflare - Приватные IPv4 прокси от 0.39 USD	05:45 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 05:23 Точные прогнозы на футбол 01:02 Ставки на супер тренды в спорте 15:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 08:25 Отвратительное поведение 11:00 Кто может дать инвайт на WebMasters?