Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
01:09 Adsense личный опыт 
23:55 Сверстаю бесплатно 
23:10 Снижение траста на молодом сайте 
22:01 Ищу код для замены капчи в форме обратной связи 
20:58 Апдейт 29.05.2017 
20:37 Proleed - партнерская CPS сеть. Тематика трафика: «Образование», «Курсы обучения» 
18:55 AffiliateCube 3.0 - усовершенствованная платформа 
01:24 Мегапарсер номеров Вконтакте. 
01:21 Программа для рассылки сообщений Viber -Mass Advert Viber Pro 3.0 
01:11 СЕРВИС ДЛЯ РАССЫЛКИ СООБЩЕНИЙ В ИНСТАГРАМ ДИРЕКТ. 
00:01 Индивидуальная Web Графика для вас. Макеты, логотипы, баннеры, иконки 
23:15 2 сайта азартной тематики 
20:58 Продвижение в Яндексе 
19:14 Рерайт, копирайт, переводы, авторские статьи. 
01:23 Топ самых лучших книг 
21:39 Не могу продвинуться в топе 
21:21 Восхождение на Эльбрус 
20:30 MFA сайтами еще занимаються? 
20:21 Трансляции спорта 
19:11 Топ-6 самых мотивирующих фильмов 
19:04 Веселые картинки