Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
00:03 Биржи ссылок в 2026 - реально ли новичку с одним сайтом поднять копейку? 
00:01 С чего сейчас проще начать? 
00:00 Бесплатное получение бэклинков 
23:58 Бесплатное расширение для Chrome — проверка ссылок прямо на странице 
23:53 Хватит ныть про смерть сайтов и нейроответы - почему мы всё еще в деле 
13:49 Ап выдачи Яндекса 8 апреля - есть движение, но интереснее что творится с AI-ответами Google 
02:10 Яху Скаут и китайцы - есть там вообще жизнь для новичка в 2026? 
23:36 GoodsMoney.io 
23:35 Volna.money 
14:48 Monitex: Мониторинг с кэшбэком 80% в USDT 
13:58 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 
09:40 GhostRocket.pro — Взлетаем в новую эру криптообмена! 
09:33 От $0.015 за IP | $0.68 за ГБ | 9PROXY.COM | 20+ млн резидентных прокси | 99,95% аптайм | Без чёрных списков 
08:22 Мониторинг обменников Сrypto-scout.io 
03:28 Точные прогнозы на футбол 
23:51 Сайты Рунета 
17:50 Ставки на супер тренды в спорте 
13:44 Во Франции начали штрафовать за IPTV - до 300-400 евро уже прилетает обычным пользователям 
12:55 Курс доллара упал ниже 85 рублей 
10:21 Список обновленных тем пуст... 
02:12 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди