Может, я чего-то не понимаю, но смысл в этом действии?

Если сервер правильно вернул ответ 404-й ошибки, то ПС и так ничего брать с этой страницы не станут и даже выбросят ее из индекса (если ранее со страницей все было ОК).

Также интересен чисто технический вопрос КАК он закрывает это от индексации? Если с помощью тега <NOINDEX>, то этот эффект не возымеет никакого действия для Google (ПС игнорит этот тег).
Если «хак» заключается в добавлении URL страницы 404 в robots.txt, то это вы можете вполне сделать и ручками.

Нее, ничего так и не понял...