Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
16:21 Спам 
15:53 Некачественная страница. 
14:04 08.08.18 АП 
13:27 темы 
12:13 Quick Sender Ultra - Многопоточная программа для раскрутки и продвижения Вконтакте 
11:49 2 акаунт адсенс: продать или оставить себе?? 
11:45 Bodyclick.net - рекламная партнерская сеть. 
16:03 Семантическое ядро с ручной группировкой и НК ключами 
15:23 P2PChange.is - автоматический обмен BTC,LTC,PM,Payeer,BTC-e 
15:12 Услуга чертежника и 3D моделирования 
15:04 Куплю сайт. Бюджет 1000€ 
14:05 Веб-дизайн недорого! 
13:59 Семантическое ядро по новой технологии + LSI с ручной группировкой 
12:58 Базы данных для Вашего бизнеса! 
14:06 Яндекс, ты жив? Не обновляется панель ЯВ 
11:51 Что с рублем? 
09:00 мониторинг процессов linux 
22:52 Скрыть от ПС Google встраиваемый iframe с другого сайта (оплата) 
20:35 BoardMaster 
15:10 Как запретить доступ к сайту из одной страны? 
23:22 Криптовалюта Tkeycoin. Российские разработчики и арабские инвесторы