Как забанить бота Bing ?
Страницы: 1 2 След.
Как забанить бота Bing ?, Как убить эту заразу
Ситуация следующая.
Есть сервак на нем пару сайтов с маленьким количеством трафика.
И в последние пару дней сервак тупо лежит. Проверил логи, а оказывается Bing грузит все это дело.
Естественно бот Bing игнорирует robots.txt и поэтому не могу ему задать задержку.

Поэтому в htaccess забанил его маску IP. Но... Эта зараза все равно продолжает посещать сайт (сервак уже не так сильно грузится, но все же) 90% его заходов это 403 ошибка, остальные 10% это нормальный ответ 200


Какие есть ещё варианты "убить Билла" ?
_http://coderhs.com/archive/reduce_server Посмотрите по логам его имя и вставьте в список, по аналогии.

По ip бесполезно - боты используют разные ip для объективной оценки сайта.
Цитата
Coder пишет:
По ip бесполезно - боты используют разные ip для объективной оценки сайта.
так я целую маску забанил.
Промониторив около 10000 строчек логов я сделал вывод что бинг работает только с одной маски

но прикол не в этом. Прикол в том что бинг продолжает заходить на сайт с тех IP которые я забанил
В вебмастере бинга есть Скорость обхода сайта. Устанавливайте самое маленькое значение и все.

★★★★★

inwoxer.ru - копии сайтов 800 руб, создание сайтов 200 руб, https сертификаты и другие услуги по СОЧНЫМ ценам. 
NEW! СЕО аудит 700 руб и прогон Твиттер 500 руб

★★★★★
Цитата
span4bob пишет:
90% его заходов это 403 ошибка
Естественный ответ бана маски. А так, бот то хороший
Цитата
span4bob пишет:
бинг продолжает заходить на сайт с тех IP которые я забанил
Если правильно прописали все в htaccess - такого не могет быть)
Цитата
Coder пишет:
такого не могет быть)
Может, все зависит от метода блокировки, через лимит итд
например статика типа фавикон может отдаваться итд
Цитата
Принципал пишет:
Может, все зависит от метода блокировки, через лимит итд
Так об чем и речь - правильно прописать - то есть, что бы получить на выходе то, что нужно. Правильно вообще (синтаксис), и правильно по закрытию.
Цитата
Coder пишет:
Цитата
span4bob пишет:
бинг продолжает заходить на сайт с тех IP которые я забанил
Если правильно прописали все в htaccess - такого не могет быть)
вот что я прописал
Deny from 207.46.13.

Бинг продолжает заходить с
207.46.13.18
207.46.13.213
.htaccess - набор инструкций к включению/использованию  _http://coderhs.com/archive/htaccess_set
Цитата
Coder пишет:
Цитата
Принципал пишет:
Может, все зависит от метода блокировки, через лимит итд
Так об чем и речь - правильно прописать - то есть, что бы получить на выходе то, что нужно. Правильно вообще (синтаксис)
Синтаксис будет лучше.
Цитата
Тимур Леонов пишет:
Цитата
Coder пишет:
Цитата
Принципал пишет:
Может, все зависит от метода блокировки, через лимит итд
Так об чем и речь - правильно прописать - то есть, что бы получить на выходе то, что нужно. Правильно вообще (синтаксис)
Синтаксис будет лучше.

Ещё один кладоискатель:)
Coder пишет:
Цитата
.htaccess - набор инструкций к включению/использованию _coderhs.com/archive/htaccess_set
Благодарю
Хорошие подсказки
Цитата
StackerMan пишет:
Хорошие подсказки
Да просто не надо 100500 мусорных страниц на сайте устраивать, если он даже 1500 рублей в месяц на норм хостинг не может заработать. От ботов тыриться - себя не уважать...
Изменено: Eye - 18 Ноября 2018 18:08
Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.
Страницы: 1 2 След.
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
17:43 Праздники кончились, а трафик так и не вернулся. Глюк или фильтр? 
17:37 че по ПФ щас реально работает?? (кроме старья) 
17:21 SEO-инструменты слепнут: Ahrefs и Semrush массово банят на сайтах из-за ИИ 
17:18 Купить шаблон 
15:14 DLE не создает бэкап с админки сайта, как быть? 
14:17 Простая тема Вордпресс 
12:59 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 
16:44 FASTINDEX — сервис, после которого конкуренты хватаются за валидол 
14:59 Продвижение сайта: [SEO-трафик][Вывод в ТОП][Крауд-маркетинг + SEO] 
14:58 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
14:58 Trustpilot Reviews | Подниму рейтинг вашей компании 
14:57 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата 
14:57 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж 
14:32 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно 
18:12 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 
18:00 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 
17:34 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
15:18 Win 10: Три месяца без обновлений. Как полёт? // Переезд на Win 11 или Linux 
16:25 Подтягиваем физкультурку 
08:18 Тренера "Сочи" обвинили, что он рулил через ChatGPT. Игрокам предложили не спать 28 часов 
08:09 Владельцы "китайцев" 3-леток, признавайтесь честно — сгнили или едут?