robots.txt для субдоменов
Страницы: 1
robots.txt для субдоменов, Yandexbot достал

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

Всем привет задался вот таким вопросом.
Есть основной сайт подразделы (города) выведены в виде субдоменов.
сайт.ру
город1.сайт.ру
город2.сайт.ру
город3.сайт.ру

В последние 3 дня Yandexbot просто достал сканировать каждую страницу на всех субдомены безперерывно.  Чем увеличил нагрузку на сервер на более чем на 300% (обычная нагрузка 30-40% в последние 3 дня нагрузка не падает ниже 97%)

Решил поставить Crawl delay 10 на всех субдоменах на Yandex. Но логически это не решит проблему, так как он все равно будетодновремено обращаться ко всем субдоменам продолжая нагружать процессор.

Теперь вопрос ктото пробывал прописывать в роботсе основного домена crawl delay переносилось это правило на субдомены?

Новогодние скидки на прогоны - Такого Вы ещё не в-и-д-е-л-и!!!

► ◄


Продвижение сателлитами


Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
09:22 Xrumer-полезный софт или нет? 
09:22 Как сделать скриншоты файлов .swf 
06:51 Как сделать лучше, помогите! 
04:15 Как сделать меньше описание в категориии пицца, например, Маргарита 
04:14 Рекламная сеть яндекса личный опыт 
04:12 Ранжированеи в Гугл 
20:52 17 февраля 2018 Яндекс выдача 
01:05 Куплю ненужные вам сайты с ТИЦ 
00:09 Прогон по профилям 300 рублей, 170 сайтов, ТИЦ от 10 
23:47 Куплю адалт сайт (ы) 
23:26 Требуется человек в команду для работы с инстаграмом 
21:54 наполнение сайта нужен человек 
21:53 Работники требуются 
20:50 Продажа дедиков(Dedicated Servers) дешевле только даром! 
07:27 Бесплатно текст до 2 000 символов на интересующую тему от Антона Николаевича, 2 человека, за честный развёрнутый отзыв 
04:12 Есть 6 англоязычных статей. Продам. 
03:44 Кто работает с рекламной сетью яши ? 
03:12 Как ВК? 
00:49 Копейка рубль бережёт. Пословица не бедняков. 
00:42 Развожусь .... 
23:21 Всегда верил в Яндекс)