Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
12:56 Рекламная сеть яндекса личный опыт 
12:31 Переезд сайта на https 
11:49 Продвижение в ТОП Яндекс. Мега быстро! 
18:29 Калькулятор на сайте. Заголовки жирным. 
15:34 Апдейт ИКС 24.05.19 
12:43 Ищу сеошника на e-comm проект 
02:50 Как убрать rel="nofollow" в блоге на wordpress.com !? 
13:33 17 ссылок для продвижения в Google 
12:01 Пишу модули для DLE 
10:03 Продаю сайт с уникальным контентом 
08:49 Наполнение сайта контентом - перевод, рерайт, копирайт 
07:06 Прогон по личной базе, больше 1000 трастовых сайтов! Продвижение СЧ и НЧ запросов + рост показателей! Гарантии! 
01:06 Комплексный качественный прогон по собственной базе от $5. Хрумер 12 Elite 
00:23 Создание сайтов под ключ, верстка, редизайн 
12:58 Кому пришла выплата с AdSense? 
12:31 Наши машинки 
09:39 Акции, облигации, банковский депозит? 
03:24 На какую тему создать сайт? 
13:21 Топик поднятия настроения. Приколы, картинки, видео и пр. 
11:38 xrumer.pro неадекватный админ, неадекватный сервис 
22:04 Посоветуйте фильм - фантастику