Проиндексировано, несмотря на блокировку в файле robots.txt
Страницы: 1
Проиндексировано, несмотря на блокировку в файле robots.txt, Предупреждение от гугла
Сегодня получил письмо от гуглобота предупреждение, что некоторые страницы (по факту одна и та же страница с разными GET параметрами) индексируются гуглом несмотря на запрет в роботс.тхт
Запрет стоит таким образом что сама страница допущена в индекс, но все варианты с GET параметрами отсекаются.

Страница - карта с нанесенными на ней маркерами с определенной смысловой нагрузкой. GET параметр дает возможность доступа к конкретному фрагменту карты. Ссылки с GET параметрами есть как на других страницах сайта, так, возможно и на каких-то других сторонних сайтах.

Гугл, судя по хелпам, предлагает запретить индексирование страницы вообще, что как бы не вариант.

Что делать - забить? Или это чем-то чревато может быть для меня?
Цитата
Валерий Тимофеев пишет:
Проиндексировано, несмотря на блокировку в файле robots.txt
Это не ново, Гугл плюет на файл robots.txt, уже лет 5-6 как smile:wall:
Почему завистники всегда чем-то огорчены? Потому что их снедают не только собственные неудачи, но и успехи других.
Гуглу пофик. При должном желании ему можно запихнуть все что угодно.
Цитата
Валерий Тимофеев пишет:
Ссылки с GET параметрами есть как на других страницах сайта, так, возможно и на каких-то других сторонних сайтах.

Причина индексирования Гуглом страниц несмотря на запрет в роботсе.
Выход: тег canonical на основную страницу без get-параметров.
Справка Гугла https://support.google.com/webmasters/answer/139066
Изменено: Oleg Drum - 2 Июня 2019 16:52
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
01:26 Стоит ли добавлять сайт в Rambler топ 100? 
21:17 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
21:08 Влияет ли кодировка на индексацию позиции в поиске? 
17:32 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
14:51 Adtrafico - Правильная партнёрская сеть под бурж трафик 
14:03 Партнерская программа OWNR WALLET 
11:59 2Index - быстрая индексация страниц сайта и обратных ссылок 
18:59 Сервис валидации e-mail баз 
18:37 Ural-obmen.ru — выгодный сервис обмена 
18:18 Obama.ru - безопасный обмен криптовалют и электронных денежных средств 
17:28 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно 
11:00 SpeedyIndex - ускорение индексирования ссылок в Google. 100 ссылок в подарок. 
10:41 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 
22:18 SwapPix.io - быстрый и безопасный обменник криптовалют. 
20:29 Точные прогнозы на футбол 
21:12 Каспкрски ОС 
22:58 У меня дикая просадка по РСЯ за последние 3 суток 
21:51 Linux - это максимальная свобода 
21:33 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
14:38 Продажи российских компьютеров в РФ выросли вдвое 
12:29 Карпаты