Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
10:20 Текстовый апдейт 7 октября 
09:51 CompTIA Security+ Dumps - Perfect Choice To Prepare 
19:31 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
18:11 Как заблочить роботов, которые кладут сайт 
18:10 Продвижение в ТОП Яндекс. Мега быстро! 
14:20 Проблема со страницей "Общие настройки" - Joomla 2.5 
07:15 Lottery Partner в поиске партнеров! Самые высокие ставки! 
10:20 Качественный профильный ручной прогон недорого 
09:42 Веб-мастер. Создаю сайты "под ключ" 
02:39 Прогон по профилям с ИКС от 10 от 150 рублей, незаспамленные доноры 
21:29 PAY2DAY.TOP - Покупка и продажа криптовалюты за рубли. 
19:25 Прогон по личной базе, больше 1000 трастовых сайтов! Продвижение СЧ и НЧ запросов + рост показателей! Гарантии! 
18:13 Накрутка рейтинга Web of trust (mywot) 
17:50 Продажа Dedicated servers (Дедики) 
18:14 Кто что знает про данный гарант 
17:35 Помогите выиграть в конкурсе! 
12:08 Натяжка шаблона на Wordpress 
01:42 Стоит ли приобретать Xrumer 
22:43 Нужен прогон по доскам объявлений 
22:18 Встраиваемые видео с ютуб и юридическая ответственность 
16:38 У кого есть аккаунт на Мегаиндекс или Серпстат?