Юрий, по факту смотрю не на "ощущения", а на метрики - load, количество процессов php-fpm, время ответа и логи. обычно картина простая: трафика по метрике мало, а в top/htop куча php-fpm висит, либо CPU упирается, либо очередь запросов растёт - и сайт начинает отвечать по 2–5 секунд. если копнуть глубже, почти всегда вылезает что-то из типового: либо боты долбят динамику (особенно всякие xmlrpc/wp-login), либо wp-cron на каждый заход триггерится и задачи наслаиваются, либо просто нет кеша и каждый запрос идёт в php и базу. ещё часто вижу, что php-fpm настроен "как из коробки" - либо процессов мало и всё в очередь, либо наоборот много и память съедается, начинается своп и сервер "умирает" без видимой причины.

у самого был кейс: сайт почти без трафика, а load под 8–10, в итоге оказалось - один крон завис и гонял тяжёлый запрос по кругу, плюс пара ботов била одну страницу без кеша. поэтому и написал, что в 70% случаев это не железо, а конфиг и код.

если у кого есть реальные кейсы - кидайте, интересно посмотреть, у кого где именно узкое место вылезло.
а то многие пишут "сервер не тянет", а в логи даже не смотрели