Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
04:49 Ссылочная масса 
02:58 Нет трафика с Google - в чем проблема? 
23:41 24 июля текстовый апдейт Яндекса: индекс по 21 июля 
21:28 Можно на сайте о ремонте квартир добавить раздел "ремонт бытовой техники"? 
20:24 Аптейт тИЦ от 17 мая 2017 года 
19:55 AffiliateCube 3.0 - усовершенствованная платформа 
19:29 Чтобы страницы открывались в новом окне 
05:31 SocksHub.net - proxy, которые подходят всем 
04:53 Копирайтинг, Рерайтинг, СЕО - от 80/1000 
00:18 Составление Семантического Ядра для вашего сайта 
21:58 Домены Авиабилетов по 1500руб 
21:48 Качественный прогон Хрумером, Zennoposterом всего 10 WMZ, Большой опыт работы. Статьи, комментарии, профиля, гостевые. 
21:36 Дизайн: сайтов, баннеров, шапок, логотипов,оформление групп вконтакте 
20:37 Куплю игровой портал 
05:55 Зерокул наказан за мошенничество 
00:48 Может изменить аккаунт? 
19:25 Велотренажёр дома? 
15:44 Свободные домены с ТИЦ - минимум 50 
11:11 Бесплатная графика! 
23:29 Какой фильм посмотреть сегодня вечером? 
23:07 Новости смотрели ? Предприниматели с 14 лет