robots.txt для субдоменов
Страницы: 1
robots.txt для субдоменов, Yandexbot достал

Комплексное SEO продвижение в поисковых системах Яндекс, Google

Всем привет задался вот таким вопросом.
Есть основной сайт подразделы (города) выведены в виде субдоменов.
сайт.ру
город1.сайт.ру
город2.сайт.ру
город3.сайт.ру

В последние 3 дня Yandexbot просто достал сканировать каждую страницу на всех субдомены безперерывно.  Чем увеличил нагрузку на сервер на более чем на 300% (обычная нагрузка 30-40% в последние 3 дня нагрузка не падает ниже 97%)

Решил поставить Crawl delay 10 на всех субдоменах на Yandex. Но логически это не решит проблему, так как он все равно будетодновремено обращаться ко всем субдоменам продолжая нагружать процессор.

Теперь вопрос ктото пробывал прописывать в роботсе основного домена crawl delay переносилось это правило на субдомены?
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
05:51 7 августа 2020 выдача | Для вас когда лето кончается? 
21:48 Поменял домен 
19:49 Можно с помощью накрутки ПФ "почувствовать выход в опу мира и ощутить ответ тех поддержки яшы"? 
15:25 Adtrafico - Правильная партнёрская сеть под бурж трафик 
06:49 Kokos.click - народная тизерная сеть! 
21:59 Накрутка поведенческих факторов весна - лето 2020 для продвижения сайта в ТОП Яндекса и Google 
21:20 TeaserNet - тизерная сеть нового поколения! Высокие доходы, стабильные выплаты 
01:25 [Бесплатный тест] Топовые мобильные прокси RU, UA, UK. AIRSOCKS 3G / 4G / LTE. С подменой Passive OS fingerprint (Windows / Mac / Android / iPhone) 
21:56 Базы номеров viber все города Украины. 
18:55 Продам сайт 
17:19 Скопирую сайт любой сложности: быстро, качественно и без головной боли. 
16:21 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
15:17 EnotGlobal – Реактивная генерация поведенческого трафика. 
19:06 Продам свежий сайт о путешествиях 
21:26 ruposters.ru: На турецких курортах резко началась новая волна коронавируса 
20:39 Билл Гейтс предсказал "катастрофу страшнее пандемии коронавируса" 
16:50 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
19:07 Дуров увидел в попытке США выкупить TikTok угрозу гибели глобального интернета 
18:07 Партнёрская рекламная сеть Vadideo Network 
11:59 Edu-affiliates - лучшая партнерка в нише эссе! 
07:46 Обсчитали в магазине