Подскажите пожалуйста, как в robot.txt закрыть индексацию страниц календарного архива и страницы на которых списки статьи? Дело в том что у меня более 100 страниц со статьями и не знаю как запретить их индексировать. плюс ко всему заметил что в поисковиках можно найти архив статей по датам, тоже хотелось бы их убрать от индексации. Сайт стоит на движке вордпресс.