Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
23:48 Как вы поднимаете? / 15.02.2019 Яндекс выдача 
18:52 Trastik - кто что скажет, ссылки там путёвые? 
15:16 Adtrafico - Правильная партнёрская сеть под бурж трафик 
14:31 SE Ranking - новый сервис проверки позиций сайтов в поисковиках 
14:26 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
13:13 14.02.19г. опять АПнуло Яндекс выдачу 
11:25 Kokos.click - народная тизерная сеть! 
01:24 Нужны Яденьги 
18:52 Уникальные тексты на нужную вам тематику 
18:08 Imark Esports – самое крупное киберспортивное медиа-агентство в Казахстане. 
16:17 GetETH - первый умный инвестиционный контракт со средним риском со специальным доходом 
14:42 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
12:58 Хочу продать сайт. Прошу оценить его стоимость 
12:17 Нужна накрутка подписок на сайте 
14:35 Доска объявлений 
12:56 Требуется помощь! 
00:59 SEO продвижение сайтов в Яндекс, Google. Поднятие ИКС сайту, исправления ошибок, разработка стратегий 
21:31 Новая тизерная сеть Actionteaser.ru 
19:14 Частная база руководителей, директоров, лиц принимающих решения (ЛПР) по России за 2018 г. 
19:12 Объявы адсенс, мать его.. 
17:27 Ключевые слова в Yoast SEO