Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
17:02 Мои сайты теперь мои 
15:00 Апдейт Яндекс выдача 23 января 2020 
13:26 Eurobit - выбор людей, ценящих свои деньги и свое время! 
00:03 ПС Baidu захватит мир! надевайте тазики 
23:42 Google AdExchange 
17:07 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
15:46 Adtrafico - Правильная партнёрская сеть под бурж трафик 
18:04 Rexi.cc - Большой выбор направлений для обмена 
15:34 Крупные новостные (СМИ) площадки, Яндекс Новости, Google News, анонсы, хорошая посещаемость. 
14:20 17 ссылок для продвижения в Google 
13:19 Закажите уникальные описания карточек товаров для интернет-магазина. Цена ниже средней 
12:42 Программирование нестандартных проектов под ключ 
10:26 PAY2DAY.TOP - Покупка и продажа криптовалюты за рубли. 
09:41 Бесплатное создание сайта 
12:42 Комплексное продвижение в Instagram 
11:29 Timphenix - осторожно, мошенник 
21:05 Периодически скачут позиции 
17:21 Подскажите пжлст Партнёрку по фарме 
13:57 Подскажите посещаемые доски объявлений 
11:19 ТОП Яндекса - портфолио внутри 
10:47 Базы email недорого, или на заказ