Проиндексировано, несмотря на блокировку в файле robots.txt
Страницы: 1
Проиндексировано, несмотря на блокировку в файле robots.txt, Предупреждение от гугла
Сегодня получил письмо от гуглобота предупреждение, что некоторые страницы (по факту одна и та же страница с разными GET параметрами) индексируются гуглом несмотря на запрет в роботс.тхт
Запрет стоит таким образом что сама страница допущена в индекс, но все варианты с GET параметрами отсекаются.

Страница - карта с нанесенными на ней маркерами с определенной смысловой нагрузкой. GET параметр дает возможность доступа к конкретному фрагменту карты. Ссылки с GET параметрами есть как на других страницах сайта, так, возможно и на каких-то других сторонних сайтах.

Гугл, судя по хелпам, предлагает запретить индексирование страницы вообще, что как бы не вариант.

Что делать - забить? Или это чем-то чревато может быть для меня?
Цитата
Валерий Тимофеев пишет:
Проиндексировано, несмотря на блокировку в файле robots.txt
Это не ново, Гугл плюет на файл robots.txt, уже лет 5-6 как smile:wall:
Почему завистники всегда чем-то огорчены? Потому что их снедают не только собственные неудачи, но и успехи других.
Гуглу пофик. При должном желании ему можно запихнуть все что угодно.
Цитата
Валерий Тимофеев пишет:
Ссылки с GET параметрами есть как на других страницах сайта, так, возможно и на каких-то других сторонних сайтах.

Причина индексирования Гуглом страниц несмотря на запрет в роботсе.
Выход: тег canonical на основную страницу без get-параметров.
Справка Гугла https://support.google.com/webmasters/answer/139066
Изменено: Oleg Drum - 2 Июня 2019 16:52
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
19:29 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
17:29 Как продвигать сайт с неуникальным контентом 
14:50 Индексация страниц 
12:36 У кого новостник, дайте пару советов плиз 
13:53 AviTool - мощный инструмент для автоматизации работы с Avito 
17:01 Absence в Армении 
23:19 Ребята подскажите какими сервисами и прогами вы пользуетесь для SEO продвижения? 
12:15 [MOBILE 4G/LTE PROXY] Приватные Мобильные Прокси 30 Дней 10$ Безлим/ Подходят для всех сайтов 
23:25 Обменник криптовалюты OnlyCrypto 
19:18 Размещение статей, ссылок и постовых на качественных ресурсах 
16:32 Продажа аккаунтов HH.RU 
15:14 Новый белый офер на медицину! 
13:22 Linken Sphere – браузер-антидетект нового поколения 
04:12 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
22:06 Добро пожаловать в цифровой мир... 
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 
22:08 Накрутка поисковых подсказок 
05:04 Точные прогнозы на футбол 
14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
12:23 150+ хакерских поисковых систем и инструментов