Можно ли использовать вот такой Robots.txt
Страницы: 1
Можно ли использовать вот такой Robots.txt, Если прописывать его в engine.php
Правильно ли использовать вот такой роботс прописаный через engine.php

if ($subaction == 'userinfo' OR
$subaction == 'allnews' OR
$subaction == 'newposts' OR
$do == 'stats' OR
$do == 'admainlg' OR
$do == 'addnews' OR
$do == 'register' OR
$do == 'favorites' OR
$do == 'rules' OR
$do == 'pm' OR
$do == 'feedback' OR
$do == 'lastcomments' OR
$do == 'lostpassword' OR
$do == 'search' OR
$do == 'lastnews' OR
$do == 'alltags' OR
$do == 'tags' OR
$dle_module == 'date') $metatags .= <<<HTML
\n<meta name="robots" content="noindex,nofollow" />
HTML;


А в файле robots.txt прописать всего лишь

User-agent: *
Disallow: /engine/
Host: сайт
Sitemap: сайт/sitemap.xml
Вполне, так даже нужно делать.
Тоже интересно, как будет лучше, закрыть в роботс или так добавить через мета тег
Ну я просто поспрашивал. сказали что сам файл для яка не аргумент вапще. и лучше всего закрыть метатегом а в файле оставить основу с хостом и тд

Цитата
Евгений пишет:
Тоже интересно, как будет лучше, закрыть в роботс или так добавить через мета тег
Цитата
Никита Золотарев пишет:
Ну я просто поспрашивал. сказали что сам файл для яка не аргумент вапще. и лучше всего закрыть метатегом а в файле оставить основу с хостом и тд
Спасибо.

Думаю читали здесь _alaev.info/blog/post/3900 Список конечно намного побольше, но тут уж по желанию. У меня просто и категории конкерные закрыты то делал в шаблоне для них 
[category=3,6,7,9,10,11,12,13,14,16]<meta name="robots" content="noindex,nofollow" />[/category]
и также в роботс для уж точного контроля
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
14:13 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
13:38 2Index - быстрая индексация страниц сайта и обратных ссылок 
12:44 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 
12:42 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
23:09 Как безопасно купить Гугл почту? 
13:45 Какой движок выбрать для форума? 
13:43 Нашел скрины выплат с Сапы за 2010 год. Пошел плакать 
14:05 TETChange-Обменник криптовалют 
12:36 Nexulume.com Обменник без AML и KYC 
09:12 Swapwatch.org — Мониторинг криптовалютных обменников 
09:07 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
23:25 SOCKS5 приватные прокси на 30 дней для PayPal 
23:24 Google Voice аккаунты для бесплатных SMS и звонков 
23:23 PayPal аккаунты для любых целей 
12:41 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
06:26 Ставки на супер тренды в спорте 
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
22:30 Точные прогнозы на футбол 
13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
07:11 Список обновленных тем пуст... 
17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем