Как забанить бота Bing ?
Страницы: 1 2 След.
Как забанить бота Bing ?, Как убить эту заразу
Ситуация следующая.
Есть сервак на нем пару сайтов с маленьким количеством трафика.
И в последние пару дней сервак тупо лежит. Проверил логи, а оказывается Bing грузит все это дело.
Естественно бот Bing игнорирует robots.txt и поэтому не могу ему задать задержку.

Поэтому в htaccess забанил его маску IP. Но... Эта зараза все равно продолжает посещать сайт (сервак уже не так сильно грузится, но все же) 90% его заходов это 403 ошибка, остальные 10% это нормальный ответ 200


Какие есть ещё варианты "убить Билла" ?

Комплексное SEO продвижение в поисковых системах Яндекс, Google

_http://coderhs.com/archive/reduce_server Посмотрите по логам его имя и вставьте в список, по аналогии.

По ip бесполезно - боты используют разные ip для объективной оценки сайта.
Цитата
Coder пишет:
По ip бесполезно - боты используют разные ip для объективной оценки сайта.
так я целую маску забанил.
Промониторив около 10000 строчек логов я сделал вывод что бинг работает только с одной маски

но прикол не в этом. Прикол в том что бинг продолжает заходить на сайт с тех IP которые я забанил
В вебмастере бинга есть Скорость обхода сайта. Устанавливайте самое маленькое значение и все.

★★★★★

inwoxer.ru - копии сайтов 300 руб, создание сайтов 900 руб, https сертификаты, раскрутка инстаграм 200 руб и другие услуги по СОЧНЫМ ценам. 
NEW! СЕО аудит 400 руб и прогон Твиттер 300 руб

★★★★★
Цитата
span4bob пишет:
90% его заходов это 403 ошибка
Естественный ответ бана маски. А так, бот то хороший
Цитата
span4bob пишет:
бинг продолжает заходить на сайт с тех IP которые я забанил
Если правильно прописали все в htaccess - такого не могет быть)
Цитата
Coder пишет:
такого не могет быть)
Может, все зависит от метода блокировки, через лимит итд
например статика типа фавикон может отдаваться итд
Цитата
Принципал пишет:
Может, все зависит от метода блокировки, через лимит итд
Так об чем и речь - правильно прописать - то есть, что бы получить на выходе то, что нужно. Правильно вообще (синтаксис), и правильно по закрытию.
Цитата
Coder пишет:
Цитата
span4bob пишет:
бинг продолжает заходить на сайт с тех IP которые я забанил
Если правильно прописали все в htaccess - такого не могет быть)
вот что я прописал
Deny from 207.46.13.

Бинг продолжает заходить с
207.46.13.18
207.46.13.213
.htaccess - набор инструкций к включению/использованию  _http://coderhs.com/archive/htaccess_set
Цитата
Coder пишет:
Цитата
Принципал пишет:
Может, все зависит от метода блокировки, через лимит итд
Так об чем и речь - правильно прописать - то есть, что бы получить на выходе то, что нужно. Правильно вообще (синтаксис)
Синтаксис будет лучше.
Цитата
Тимур Леонов пишет:
Цитата
Coder пишет:
Цитата
Принципал пишет:
Может, все зависит от метода блокировки, через лимит итд
Так об чем и речь - правильно прописать - то есть, что бы получить на выходе то, что нужно. Правильно вообще (синтаксис)
Синтаксис будет лучше.

Ещё один кладоискательsmile:)
Coder пишет:
Цитата
.htaccess - набор инструкций к включению/использованию _coderhs.com/archive/htaccess_set
Благодарю
Хорошие подсказки
Цитата
StackerMan пишет:
Хорошие подсказки
Да просто не надо 100500 мусорных страниц на сайте устраивать, если он даже 1500 рублей в месяц на норм хостинг не может заработать. От ботов тыриться - себя не уважать...
Изменено: Eye - 18 Ноября 2018 18:08
Кому-нибудь другому очень просто рассказать, как надо жить и что делать. Я бы любому все объяснил. И даже показал бы, к каким огням лететь и как. А если то же самое надо делать самому, сидишь на месте или летишь совсем в другую сторону. © В. П.
Страницы: 1 2 След.
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
12:17 А у вас апдейт убежал. 16.12.18 яндекс выдача 
11:33 Adsense личный опыт 
11:30 Рекламная сеть яндекса личный опыт 
11:05 Липкие объявления от РСЯ 
09:28 В теме тема СИсек не раскрыта. АП 15.12 Яндекс выдача 
21:44 Сколько ссылок нужно покупать (сайту 6 месяцев) 
20:21 Откройте секреты продвижения медицинского новостного сайта..... 
13:03 Быстрые Dedicated servers, Выделенные сервера, Дедики 
13:03 Настройки ленты на плагин Wpgrabber для WordPress 
12:56 Эффективные внешние ссылки с Яндекс.Вебмастер - Блоги, Статьи, Профили, Форумы, Википедия, Подписи, Комментарии, Анкорный и Безанкорный прогон со статьей. 
12:28 Продам два сайта 
12:19 Продам женский сайт 
10:59 Продам топовый блог, ИКС 140, 10000 подписчиков 
09:16 Продвижение сайтов, прогон Xrumer, грамотно наращиваем посещаемость вашего ресурса! 
11:27 Если бы у Чехова был телевизор, то он стал бы обычным районным врачом 
04:22 Игры на форуме 
19:22 Где и как встретите Новый год? 
19:11 Вы и спорт 
18:22 Нужен кликандер или что то в этом роде 
18:19 Добавление страниц в индекс Бинг Гугл Яндекс 
17:48 SEO продвижение сайтов в Яндекс, Google. Поднятие ИКС сайту, исправления ошибок, разработка стратегий