нагрузку на MySQL ( Бот Гугла возможно)
Страницы: Пред. 1 2
нагрузку на MySQL ( Бот Гугла возможно)
Цитата
Дектор Пали пишет:
10 - количество секунд (минимальное) между повторными запросами робота.


Все верно, только...
Цитата
Синтаксический анализ результатов поиска
Значение Результат
Строка 22: Crawl-delay: 15 Правило, которое не учитывается Googlebot

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

у меня как то подобная же проблема была) в роботс тоже прописывал.только не помню уже что, 2 года назад было
Не чего не делал сайту но нагрузка уже второй день как упала, с чем это может быть связано???

Вот наша нагрузка какая была :

Дата Сервер Нагрузка на CPU процессами Нагрузка на MySQL
5 апреля theseus 12.88 cp 41
4 апреля theseus 9.47 cp 557
3 апреля theseus 10.8 cp 2012
2 апреля theseus 11.17 cp 2845
1 апреля theseus 8.61 cp 2219
31 марта theseus 8.11 cp 1918
30 марта theseus 10.58 cp 2677
29 марта theseus 11.64 cp 3193
28 марта theseus 11.01 cp 3079
27 марта theseus 3.19 cp 2663
26 марта theseus 13.99 cp 2299
25 марта theseus 16.17 cp 3852
24 марта theseus 8.09 cp 1387
А как объяснить такой скачек 4 апреля нагрузка упала в 5 раза ,а 5 апреля 50 раз.Нас наверно скорей всего кто то каким то способом нагружает,а вот каким это вопрос????
Есть варианты например как вычислить тот скрипт через который нагружают???
У хостера узнайте всю инфу о том, кто слал запросы
Вот топ 20 айпи по посещаемости сайта,по ним можно понять кто нагружает???

5482 Неизвестный Страницы Хиты Объем Последний визит
80.76.105.1 8254 8254 178.46 МБ 05 Апрель 2011 - 21:35
94.248.55.124 5091 5091 39.09 МБ 06 Апрель 2011 - 08:36
95.135.182.231 2997 2997 76.09 МБ 02 Апрель 2011 - 00:09
95.135.62.72 2910 2910 71.36 МБ 03 Апрель 2011 - 17:38
82.145.209.12 2406 2406 15.50 МБ 06 Апрель 2011 - 09:44
93.124.65.32 2306 2306 15.30 МБ 05 Апрель 2011 - 21:17
95.135.13.237 1872 1872 46.22 МБ 03 Апрель 2011 - 00:45
80.67.220.37 1698 1698 18.31 МБ 06 Апрель 2011 - 13:30
82.145.209.71 1458 1458 10.39 МБ 06 Апрель 2011 - 13:22
93.124.82.87 1202 1202 29.55 МБ 01 Апрель 2011 - 21:23
82.145.209.57 1170 1170 5.35 МБ 05 Апрель 2011 - 16:26
94.243.72.1 1149 1149 9.13 МБ 06 Апрель 2011 - 15:43
83.149.3.78 1144 1144 31.76 МБ 05 Апрель 2011 - 13:08
109.171.27.239 1103 1103 16.25 МБ 06 Апрель 2011 - 08:29
82.145.208.212 1102 1102 4.25 МБ 06 Апрель 2011 - 14:38
80.239.243.84 1040 1040 10.83 МБ 06 Апрель 2011 - 05:56
94.243.72.2 1024 1024 8.40 МБ 06 Апрель 2011 - 13:38
Подскажите я правильно прикрутил поисковые боты ?

User-agent: *
Disallow: /panel/
Disallow: /stats/
Disallow: /cgi-bin/
Disallow: /incfiles/
Disallow: /cache/
Disallow: /game/
Disallow: /player/
Disallow: /champ/
Disallow: /tournament/
Disallow: /files/
Disallow: /pratt/
Disallow: /manager_adm
Disallow: /manager1_adm
Disallow: /admin_ktp

User-agent: YandexBot
Crawl-delay: 50
User-agent: MSNbot
Crawl-Delay: 300
User-agent: Slurp
Crawl-Delay: 300
User-agent: googlebot
Crawl-delay: 50
User-agent: Ramblerbot
Crawl-delay: 50
User-agent: Bingbot
Crawl-delay: 50
User-agent: StackRambler
Crawl-delay: 50
User-agent: Mail.ru bot
Crawl-delay: 50
User-agent: Mediapartners-Google
Crawl-delay: 50
User-agent: Googlebot-Mobile
Crawl-delay: 50
User-agent: YandexImages
Crawl-delay: 50
Был такой случай недавно... Google и какой-то американский поисковый бот словно взбесились. Была такая же перегрузка от них, что сайт почти постоянно отключался (хостинг 1Гб.ру). Выяснилось, что виноват один товарищ, который разместил у себя глючный скрипт (либо он сам там наделал ошибок) отсылающий пинги на поисковики. И как раз в этих материалах были ссылки (множественные) на наш сайт. Как только он все это убил - сразу все стало нормально. Может быть у вас похожая история...
Цитата
Miss Belka пишет:
Был такой случай недавно... Google и какой-то американский поисковый бот словно взбесились. Была такая же перегрузка от них, что сайт почти постоянно отключался (хостинг 1Гб.ру). Выяснилось, что виноват один товарищ, который разместил у себя глючный скрипт (либо он сам там наделал ошибок) отсылающий пинги на поисковики. И как раз в этих материалах были ссылки (множественные) на наш сайт. Как только он все это убил - сразу все стало нормально. Может быть у вас похожая история...
А что за скрипт у него?
Miss Belka, Мы недавно форум подключили к rss.php . Как мне известно rss зазывает поисковиков, если пишется новое сообщение,а у нас на форуме в сутки до 1000 сообщений,это случайно не привело к нашей нагрузки?
Цитата
Slalex77 пишет:
А что за скрипт у него?
Miss Belka, Мы недавно форум подключили к rss.php . Как мне известно rss зазывает поисковиков, если пишется новое сообщение,а у нас на форуме в сутки до 1000 сообщений,это случайно не привело к нашей нагрузки?


Что за скрипт я точно не знаю - какой-то самодельный, пингующий разные сервисы при добавлении новых материалов. Что касается rss, то они могут вызывать серьезную нагрузку.
Страницы: Пред. 1 2
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
22:11 Объявления гугл выходят за пределы страницы. 
22:08 Google делает подляну сайту 
21:09 Невероятное открытие – Nofollow ссылки улучшают ваши позиции 
21:02 "Белый экран" при попытке установки или обновления компонентов (j3.6.2) 
20:02 Скрывать ли категории (рубрики) 
19:18 Текстовый апдейт: выложен индекс по 16 сентября 2016 
17:34 Adsense личный опыт 
20:29 Комплексный прогон сайтов, нет каталогов от shtaketo, хороший рост позиций + Тиц 30 - 100 
20:08 3 совета по Юзабилити и Конверсии / SEO аудит 
19:50 Dark Sender - новая программа для рассылки в Вконтакте 
19:15 Дизайн: сайтов, баннеров, шапок, логотипов,оформление групп вконтакте 
18:14 Куплю аккаунты Adsense 
16:36 Доходный онлайн кинотеатр с трафиком 
16:24 Продвижение в социальных сетях: Вконтакте, Одноклассники, Твиттер, Instagram, YOUTUBE, Facebook, Мой мир. 
22:24 Нужен баннер для популяризации раздела "Интересные темы" (безвозмездно) 
21:49 Есть тут те, кто вообще не умеет создавать сайты и сейчас не имеет ни одного? У кого не было первого раза? 
21:37 Халява, почти. Текст более 3 млн.сим., ~200 тИЦ, до 10 тыс.твиттер прогон (значения указаны суммарно) БЕСПЛАТНО 
21:11 Доска объявлений ищет нового хозяина 
20:11 TrustLink и SeoPult запускают увлекательную игру / "SeoМонстры" 
19:34 Бесплатно 1 000 просмотров Youtube c удержанием аудитории 70-100% 
18:27 «Угадай дату апдейта тИЦ» — получи Xneolinks + 500 рублей!