Google о том, как не нужно уменьшать сканирование ботом

В указанном вопросе нужно следовать правилам и не заниматься самодеятельностью.

Об этом на днях несколько постов выдал Гари Иллиес (Gary Illyes). Суммируем их содержание:

"В последние несколько месяцев мы заметили всплеск среди владельцев сайтов и некоторых CDN, которые намеренно используют код ошибки 404 или похожие 4xx (это не касается ошибки 429) для того, чтобы уменьшить частоту сканирования нашим ботом.

Должен отметить, что коды ответа сервера 403 и 404 не позволят вам быстро снизить частоту сканирования. Более того, можно добиться обратного эффекта. У нас имеются рекомендации, как правильно снижать частоту сканирования Гуглботом. И, увы, ошибок 403 и 404 в них нет".

А вам приходилось ограничивать сканирование со стороны Google? Как вы этого добивались?

18 Февраля 2023

Возврат к списку

Новые темы	Объявления	Свободное общение
19:29 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 17:29 Как продвигать сайт с неуникальным контентом 14:50 Индексация страниц 12:36 У кого новостник, дайте пару советов плиз 13:53 AviTool - мощный инструмент для автоматизации работы с Avito 17:01 Absence в Армении 23:19 Ребята подскажите какими сервисами и прогами вы пользуетесь для SEO продвижения?	12:15 [MOBILE 4G/LTE PROXY] Приватные Мобильные Прокси 30 Дней 10$ Безлим/ Подходят для всех сайтов 23:25 Обменник криптовалюты OnlyCrypto 19:18 Размещение статей, ссылок и постовых на качественных ресурсах 16:32 Продажа аккаунтов HH.RU 15:14 Новый белый офер на медицину! 13:22 Linken Sphere – браузер-антидетект нового поколения 04:12 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка	22:06 Добро пожаловать в цифровой мир... 19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 22:08 Накрутка поисковых подсказок 05:04 Точные прогнозы на футбол 14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 12:23 150+ хакерских поисковых систем и инструментов