Hostgator.com банит боты "Яндекса"
Hostgator.com банит боты "Яндекса"Hostgator.com это популярный американский хостинг-провайдер, на чьих серверах в настоящий момент находится более миллиона сайтов. Есть среди них и российские сайты. Недавно было обнаружено, что этот хостинг-провайдер…банит поисковых роботов "Яндекса". После того, как вебмастера связались с поддержкой Hostgator.com по этому вопросу, ситуация была объяснена следующим образом:
- Боты "Яндекса" создают значительную нагрузку на сервера провайдера
- Их много и приходят они с разных IP-адресов
- И вообще, наш партнер это "Google"
Конечно, это не полная блокировка "Яндекса", а, скорее, ограничение доступа, часть ботов всё же получает возможность индексировать сайты в определенные периоды времени. 
Надо отметить, что конкуренция между поисковыми системами проявляется и таким образом, заключением прямых договоров о партнерстве с хостинг-провайдерами. Есть слухи о таком соглашении между "Яндекс" и "ВКонтакте", якобы социальная сеть прямо передает поисковику пользовательские данные, а так же между "Facebook" и "Bing", причем об этом партнерстве было прямо объявлено в прошлом году. Детали подобных договоров всегда остаются за завесой тайны, но понятно, что хостерам наверняка есть своя выгода от подобного сотрудничества, в то время как остальных ботов просто терпят.  
Роботов в интернете легче отследить, чем человека, и проще ограничить им доступ к тем или иным ресурсам. Почему бы хостинг-провайдерам не начать зарабатывать на визитах ботов поисковых систем на свои сервера?

8 Апреля 2011
Комментарии:  1

Возврат к списку



Комментарии пользователей:


Это нравится:0Да/0Нет
Михаил Губин
Это война стопудово. И от МС тоже видимо война в чем-то. Это наверняка оттого что гугл систему разрабатывает.
Новые темыОбъявленияСвободное общение
21:16 Google отправляет письма в спам из-за иконок в подписи 
21:12 Спам ссылки на мой сайт с фишинг доменов .co, .today. 
19:29 В поиске страниц 0 
18:11 Всплывающий баннер при открытии сайт 
15:49 Когда ждать позиций от Яндекса? 
15:30 Отсутствует поле "position" в гугл вебмастер. Влияет ли на позиции сайта? 
10:41 Обновление поисковой базы 2020-07-06 
21:24 OnePlugin – плагин WordPress для работы с API ПП 
21:05 Прогон по личной базе, больше 1000 трастовых сайтов! Продвижение СЧ и НЧ запросов + рост показателей! Гарантии! 
20:13 Самые актуальные и выгодные промокоды Яндекс Директ (Yandex Direct) по низким ценам! 
19:09 Форумное продвижение по ключевым словам в ТОП выдачи поисковиков 
17:47 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 
17:13 GammaVPN - VPN для профессионалов 
17:00 Linken Sphere – браузер-антидетект нового поколения 
20:56 В Китае объявили третий уровень опасности из-за бубонной чумы 
19:50 SEO продвижение сайтов в Яндекс, Google. Поднятие ИКС сайту, исправления ошибок, разработка стратегий 
19:49 МТС нехорошие люди 
17:43 Нужно ли мне тратить время на nofollow 
16:14 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
15:13 Посоветуйте фильм - фантастику 
14:06 100 долларов за 8 ссылок. Круто, да?