Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
11:50 Ищу парсер кинопоиск 
11:48 Что за плагин 
11:45 Adsense личный опыт 
11:27 Букварикс: бесплатная программа для быстрого поиска ключевых слов 
10:40 Новая биржа вечных ссылок Seolinkerman.ru 
10:37 Четверг 22 февраля 2018 Апдейт Яндекс выдача 
06:49 Как сделать форму с оплатой? 
10:53 [Продажа] скрипт CPA/CPS-партнерской программы 
10:40 Автонаполняемый сайт фильмы онлайн 
00:43 Профильный прогон 200 рублей, ТИЦ от 10, проверен Checktrust 
23:24 9MC.RU Быстрые приватные SOCKS5 
19:27 Быстрые Dedicated servers, Выделенные сервера, Дедики 
17:48 Olimpchange - лучший курс для вывода Яндекс, Киви на гривну 
17:43 Куплю сайт 
12:08 Сайты нарушающие закон 
12:06 Оказывается я просто не правильно делаю сайты. Представляете? 
03:45 Переезд сайта с одной CMS на другую 
02:25 С праздником 23 февраля 
02:00 Купил первую зеркалку месяц назад - хожу извращаюсь. 
01:42 SkyNet - наши мысли читают поисковые системы. Ведётся слежка! 
01:31 Вкладываем в кобальт?