Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
10:07 Новый полезный инструмент в Я.Вебмастере 
08:58 Переезд с www на домен без www 
22:42 За отзыв ТЗ по оптимизации 1й страницы 
22:42 Сайт полностью выпал с поиска 
22:28 Ссылочное обновление Яндекс и обычная Яндекс выдача 23-24 марта 
20:02 CPA-сеть MyLead - глобальная монетизация трафика! 
19:42 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
10:57 Готовые аккаунты Яндекс Директ с пройденной модерацией, с отлежкой, трастовые 
04:23 Безанкорно, анкорно - безанкорно профильный прогон, ИКС от 10, спам до 12 
19:44 Оплата любых онлайн-покупок (VCC карты) 
12:13 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
11:52 Сайт Халтура и Работа www.halturairabota.ru 
06:33 Размещу ссылки/статьи на ваш сайт | Рост ИКС | XRumer 19.0.15 
06:29 Комплексное SEO продвижение сайтов от частного СЕО специалиста. Раскрутка сайта в Яндекс и Google. 
22:40 Стряхнуть обыденность - об Агасфере 
16:15 Как получить рефералов и посетителей на сайт бесплатно. 
13:14 Добро пожаловать в цифровой мир... 
03:57 Китай выступил против продажи TikTok вопреки требованию США 
03:49 Как заставить себя? 
01:47 У кого Яндекс задерживает выплату в этом месяце? 
01:45 МТС нехорошие люди