Проиндексировано, несмотря на блокировку в файле robots.txt
Страницы: 1
Проиндексировано, несмотря на блокировку в файле robots.txt, Предупреждение от гугла
Сегодня получил письмо от гуглобота предупреждение, что некоторые страницы (по факту одна и та же страница с разными GET параметрами) индексируются гуглом несмотря на запрет в роботс.тхт
Запрет стоит таким образом что сама страница допущена в индекс, но все варианты с GET параметрами отсекаются.

Страница - карта с нанесенными на ней маркерами с определенной смысловой нагрузкой. GET параметр дает возможность доступа к конкретному фрагменту карты. Ссылки с GET параметрами есть как на других страницах сайта, так, возможно и на каких-то других сторонних сайтах.

Гугл, судя по хелпам, предлагает запретить индексирование страницы вообще, что как бы не вариант.

Что делать - забить? Или это чем-то чревато может быть для меня?
Цитата
Валерий Тимофеев пишет:
Проиндексировано, несмотря на блокировку в файле robots.txt
Это не ново, Гугл плюет на файл robots.txt, уже лет 5-6 как smile:wall:
Почему завистники всегда чем-то огорчены? Потому что их снедают не только собственные неудачи, но и успехи других.
Гуглу пофик. При должном желании ему можно запихнуть все что угодно.
Цитата
Валерий Тимофеев пишет:
Ссылки с GET параметрами есть как на других страницах сайта, так, возможно и на каких-то других сторонних сайтах.

Причина индексирования Гуглом страниц несмотря на запрет в роботсе.
Выход: тег canonical на основную страницу без get-параметров.
Справка Гугла https://support.google.com/webmasters/answer/139066
Изменено: Oleg Drum - 2 Июня 2019 16:52
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
13:59 AI под надзором. Минцифры готовят клеймо для контента 
22:32 Gambling Craft - гемблинг по белому 
15:35 Яндекс-ап 20 марта и похороны ChatGPT, Claude и Gemini. Считаем убытки 
00:12 XEvil - софт для разгадывания капчи. Бесплатная демо-версия. Привязка к SEO/SMM-софту. 
23:11 APK на паузе. Google убивает быстрый конверт 
16:58 MAX попер в бурж: 40 стран, ведение каналов и горы дешевого трафика 
15:38 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
08:01 HH.ru Работадателя вериф 
01:42 TUNNEL-to-PROXY: превращает тысячи публичных сетевых конфигураций - в стабильные SOCKS5-прокси! 
23:12 [MOBILE 4G/LTE PROXY] Приватные Мобильные Прокси 30 Дней 10$ Безлим/ Подходят для всех сайтов 
22:38 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
21:57 Volna.money 
16:32 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 
15:49 Европейский эквайринг 
09:32 молодильные яблоки и живая вода 
09:22 Точные прогнозы на футбол 
09:17 Панель Кнопки соцсетей 
18:12 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 
18:11 Чак Норрис ушел - 19 марта 2026, 86 лет, семья подтвердила 
17:28 С юмором по жизни! 
15:29 Компьютерная мышь