Проиндексировано, несмотря на блокировку в файле robots.txt
Страницы: 1
Проиндексировано, несмотря на блокировку в файле robots.txt, Предупреждение от гугла
Сегодня получил письмо от гуглобота предупреждение, что некоторые страницы (по факту одна и та же страница с разными GET параметрами) индексируются гуглом несмотря на запрет в роботс.тхт
Запрет стоит таким образом что сама страница допущена в индекс, но все варианты с GET параметрами отсекаются.

Страница - карта с нанесенными на ней маркерами с определенной смысловой нагрузкой. GET параметр дает возможность доступа к конкретному фрагменту карты. Ссылки с GET параметрами есть как на других страницах сайта, так, возможно и на каких-то других сторонних сайтах.

Гугл, судя по хелпам, предлагает запретить индексирование страницы вообще, что как бы не вариант.

Что делать - забить? Или это чем-то чревато может быть для меня?
Цитата
Валерий Тимофеев пишет:
Проиндексировано, несмотря на блокировку в файле robots.txt
Это не ново, Гугл плюет на файл robots.txt, уже лет 5-6 как smile:wall:
Почему завистники всегда чем-то огорчены? Потому что их снедают не только собственные неудачи, но и успехи других.
Гуглу пофик. При должном желании ему можно запихнуть все что угодно.
Цитата
Валерий Тимофеев пишет:
Ссылки с GET параметрами есть как на других страницах сайта, так, возможно и на каких-то других сторонних сайтах.

Причина индексирования Гуглом страниц несмотря на запрет в роботсе.
Выход: тег canonical на основную страницу без get-параметров.
Справка Гугла https://support.google.com/webmasters/answer/139066
Изменено: Oleg Drum - 2 Июня 2019 16:52
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
21:25 Telegram работает, но уже пошли реальные кейсы. История с Лоскутовой это подтверждает 
20:47 Есть ли альтернатива Адсенсу и РСЯ? 
20:39 TikTok "увеличил длину видео"… но это произошло давно. Что тогда реально поменялось 
20:36 YouTube ничего не менял… но почему тогда старые каналы перестали заходить 
20:23 Что такое Яндекс Икс / Как накрутить Яндекс ИКС 
19:37 Instagram* ничего не убирал, но лайки перестали что-то решать 
19:28 стратегии свежести контента в 2026 что реально работает?? 
21:53 Myxa.cc - Обмен электронных валют 
20:53 Mixmasters - Exchange without AML and KYC 
18:25 buyingproxy.com | $0.95/GB Residential Proxies - 80M+ IPs | No Bandwidth Expiry 
17:37 Мониторинг обменников Сrypto-scout.io 
17:36 Куплю отзывы на kwork 
14:14 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
12:34 SEYARE.ORG - Хватит арендовать IP | Управляй сетью | Безлимит / Трафик 
21:25 Клещи 
17:35 «Жилетка для подчиненных» — прямая дорога в выгорание. Что говорит об этом Нейроменеджмент? 
12:44 С юмором по жизни! 
09:22 Осторожно! Криптовалюта 
03:42 Точные прогнозы на футбол 
14:00 Заработок на загрузочном сайте в 2026? 
17:33 Какой фильм посмотреть сегодня вечером?