Как забанить бота Bing ?
Страницы: 1 2 След.
Как забанить бота Bing ?, Как убить эту заразу
Ситуация следующая.
Есть сервак на нем пару сайтов с маленьким количеством трафика.
И в последние пару дней сервак тупо лежит. Проверил логи, а оказывается Bing грузит все это дело.
Естественно бот Bing игнорирует robots.txt и поэтому не могу ему задать задержку.

Поэтому в htaccess забанил его маску IP. Но... Эта зараза все равно продолжает посещать сайт (сервак уже не так сильно грузится, но все же) 90% его заходов это 403 ошибка, остальные 10% это нормальный ответ 200


Какие есть ещё варианты "убить Билла" ?

Бесплатная контекстная реклама

_http://coderhs.com/archive/reduce_server Посмотрите по логам его имя и вставьте в список, по аналогии.

По ip бесполезно - боты используют разные ip для объективной оценки сайта.
Цитата
Coder пишет:
По ip бесполезно - боты используют разные ip для объективной оценки сайта.
так я целую маску забанил.
Промониторив около 10000 строчек логов я сделал вывод что бинг работает только с одной маски

но прикол не в этом. Прикол в том что бинг продолжает заходить на сайт с тех IP которые я забанил
В вебмастере бинга есть Скорость обхода сайта. Устанавливайте самое маленькое значение и все.

★★★★★

inwoxer.ru - копии сайтов 800 руб, создание сайтов 200 руб, https сертификаты и другие услуги по СОЧНЫМ ценам. 
NEW! СЕО аудит 700 руб и прогон Твиттер 500 руб

★★★★★
Цитата
span4bob пишет:
90% его заходов это 403 ошибка
Естественный ответ бана маски. А так, бот то хороший
Цитата
span4bob пишет:
бинг продолжает заходить на сайт с тех IP которые я забанил
Если правильно прописали все в htaccess - такого не могет быть)
Цитата
Coder пишет:
такого не могет быть)
Может, все зависит от метода блокировки, через лимит итд
например статика типа фавикон может отдаваться итд
Цитата
Принципал пишет:
Может, все зависит от метода блокировки, через лимит итд
Так об чем и речь - правильно прописать - то есть, что бы получить на выходе то, что нужно. Правильно вообще (синтаксис), и правильно по закрытию.
Цитата
Coder пишет:
Цитата
span4bob пишет:
бинг продолжает заходить на сайт с тех IP которые я забанил
Если правильно прописали все в htaccess - такого не могет быть)
вот что я прописал
Deny from 207.46.13.

Бинг продолжает заходить с
207.46.13.18
207.46.13.213
.htaccess - набор инструкций к включению/использованию  _http://coderhs.com/archive/htaccess_set
Цитата
Coder пишет:
Цитата
Принципал пишет:
Может, все зависит от метода блокировки, через лимит итд
Так об чем и речь - правильно прописать - то есть, что бы получить на выходе то, что нужно. Правильно вообще (синтаксис)
Синтаксис будет лучше.
Цитата
Тимур Леонов пишет:
Цитата
Coder пишет:
Цитата
Принципал пишет:
Может, все зависит от метода блокировки, через лимит итд
Так об чем и речь - правильно прописать - то есть, что бы получить на выходе то, что нужно. Правильно вообще (синтаксис)
Синтаксис будет лучше.

Ещё один кладоискательsmile:)
Coder пишет:
Цитата
.htaccess - набор инструкций к включению/использованию _coderhs.com/archive/htaccess_set
Благодарю
Хорошие подсказки
Цитата
StackerMan пишет:
Хорошие подсказки
Да просто не надо 100500 мусорных страниц на сайте устраивать, если он даже 1500 рублей в месяц на норм хостинг не может заработать. От ботов тыриться - себя не уважать...
Изменено: Eye - 18 Ноября 2018 18:08
У шамана три руки,
Мир вокруг, как темный зал,
На ладонях золотых
Нарисованы глаза,
Видит розовый рассвет
Прежде солнца самого,
А казалось, будто спит
И не знает ничего.

У шамана три руки,
Сад в рубиновых лучах,
От дыхания его разгорается...
Страницы: 1 2 След.
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
22:23 Прибыльную и надежную партнёрку Perestroika Affiliates - в каждый дом! 
22:17 Сайт был исключен из списка источников Дзена из-за низкой доли собственной аудитории. 
20:33 ФАС запретила "Яндексу" занижать позиции конкурентов в поисковой выдаче 
19:12 Clickpay.Money — push-партнерка для лёгкой и удобной монетизации ваших площадок! 
18:48 выдача 24.02.2021 | Яндекс уберёт с первой позиции свои ресурсы? 
17:46 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
16:51 TerraLeads ‒ эксклюзивные COD нутра офферы в Европе и Азии 
22:24 Продвину сайт качественными ссылками. Рост посещаемости, позиций и ИКС. Крауд ссылки недорого + скидки. 
21:52 Профильный прогон 200 рублей, Тиц (Икс) от 10, проверен Checktrust 
19:35 TorgWM - Онлайн обмен Qiwi, VISA, Mastercard, Webmoney на Paysera в EUR/USD или на SEPA. 
19:26 Bitality.cc - обменник электронных валют 
18:47 Обмен/Вывод криптовалют и электронных денег в разных странах 
16:41 Флудер телефонов 
16:27 Majento PositionMeter - Быстрое сканирование Яндекс и Google 
23:16 Тот момент, когда лучше жить в небогатом государстве 
22:12 Проверяем "Анализ сайта" 
21:57 Wildberries запустился во Франции, Италии и Испании 
17:42 Соцсеть Golos с заработком за посты 
09:12 Россиянки рассказали, сколько должен зарабатывать мужчина на содержание семьи 
09:06 РБК: Маск потерял $15 млрд и лидерство в рейтинге после падения курса биткоина 
19:02 Назван размер необходимой "финансовой подушки безопасности" для россиян