Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
23:03 Отправили в баню сайт 
17:27 Рамблер лучший поисковик 
16:27 CPA-PRIVATE.BIZ - премиальная товарная программа. Только ТОП ставки! 
15:06 Adtrafico - Правильная партнёрская сеть под бурж трафик 
14:54 Юридическая Партнерская программа ProfLead 
13:01 Тестовое задание 
12:54 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
22:14 ALTVPN.com - анонимный и безопасный VPN и Прокси сервис 
19:29 Litex.pro обмен валюты с минимальной комиссией 
17:32 Едем в топ 
16:32 C1k: обмен Advcash , Perfect Money , skrill , NETELLER, крипта, приват24, тенге 
15:08 BestChange – обменивать электронную валюту можно быстро и выгодно 
13:55 Obama.ru - безопасный обмен криптовалют и электронных денежных средств 
12:06 Раскрутка Instagram, YouTube, TikTok, Twitter, Вконтакте, Telegram, Twitch, Likee - smmservis.ru 
00:58 В России более чем в два раза подскочили цены на жесткие диски 
20:32 Вложил 17$, а поднял 6 500 000 долларов 
16:17 С юмором по жизни! 
10:36 Бесплатно за отзыв можем сделать 1 услугу в соц сетях 
23:57 iGuides: Доступ к Facebook может стать платным. Instagram и WhatsApp на очереди? 
23:47 "Нищая" европейская страна Испания 
23:31 Overclockers.ru: Майнеры в Южной Корее будут платить 20% налог