robots.txt для субдоменов
Страницы: 1
robots.txt для субдоменов, Yandexbot достал
Всем привет задался вот таким вопросом.
Есть основной сайт подразделы (города) выведены в виде субдоменов.
сайт.ру
город1.сайт.ру
город2.сайт.ру
город3.сайт.ру

В последние 3 дня Yandexbot просто достал сканировать каждую страницу на всех субдомены безперерывно.  Чем увеличил нагрузку на сервер на более чем на 300% (обычная нагрузка 30-40% в последние 3 дня нагрузка не падает ниже 97%)

Решил поставить Crawl delay 10 на всех субдоменах на Yandex. Но логически это не решит проблему, так как он все равно будетодновремено обращаться ко всем субдоменам продолжая нагружать процессор.

Теперь вопрос ктото пробывал прописывать в роботсе основного домена crawl delay переносилось это правило на субдомены?
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:09 Эпоха суррогата и имитации: качество вообще кого-то волнует? Апдейт Яндекс выдача 8 января 2026 
15:32 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
14:44 SEO под нейро 
13:41 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
18:02 "Осталось 5 дн. до НГ" АПдейт Яндекс выдача 
12:24 На улице штиль, в выдаче - шторм. Апдейт 04.01.2026 
16:28 С Новым 2026 годом! + Апдейт Яндекс выдачи 02.01.2026 
08:01 TELEGRAM EXPERT — Многоцелевой комбайн по работе с Telegram 
04:07 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
00:14 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 
14:30 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
14:29 Trustpilot Reviews | Подниму рейтинг вашей компании 
14:28 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата 
14:27 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж 
00:19 Программирование (кодинг) на смартфоне 
00:13 ИИ от Илона "сорвался с цепи": Grok завалил пользователей клубничкой 
00:11 ИИ Neuro-sama: $400 000/мес без участия человека. Мы точно ту профессию выбрали? 
22:47 Кто может дать инвайт на WebMasters? 
20:56 С юмором по жизни! 
13:55 Стереотип про "зомби-апокалипсис" 1 января больше не работает? 
13:46 Студия веб-дизайна Azatweb.ru