Сидел давеча, ковырялся на сервере и возникла, может и глупая, мысль - поюзать заголовки сервака и HTTP статусы на предмет "правильности" и.т.д.

Заинтересовали данные по

Set-Cookie

Expires

+0000 GMT

Expires выводится на серваке

Код
expires=Thu, 01-Jan-1970 00:00:01 GMT

Что подразумевает отсутствие кеширования, но только при наличии параметра must-revalidate. По сути бот ПСов при обходе страниц видит, что кеширования нет и постоянно у себя держит инфу, что страничку нужно каждый раз при обходе сканировать и по новому ранжировать. По идее это плохо, если контент на странице не изменяется. В другом случае (со включенным кешированием), когда Expires выводится на будущую дату, бот видит, что страница актуальна на заданный отрезок времени (месяц, год, 10 лет, неважно), и единожды просканировав её, больше не будет заново сканировать и заново ранжировать (при отсутствии подвижек у конкурентов с идентичной инфой).

По GMT. Мы задаем в ВМах регионы сайтов. Каждый регион привязан к конкретной временной зоне, и когда сайт отдает заголовки с одним временем, а фактически время для бота другое для этого региона, то может быть, происходит логическая несостыковка публикации контента.

Это просто размышления, но на уровне администратирования серверов. Возникают мысли - почему эти факторы, а именно весь спектр заголовков сервера, не могут быть одним из факторов ранжирования? (тут я не имею ввиду ответы сервера 200, 300, 400, и.т.д.)

У кого какие мысли, пишите, интересно будет послушать. Особенно тех, кто занимается администратированием и связан с сайтостроением.