Можно ли использовать вот такой Robots.txt
Страницы: 1
Можно ли использовать вот такой Robots.txt, Если прописывать его в engine.php
Правильно ли использовать вот такой роботс прописаный через engine.php

if ($subaction == 'userinfo' OR
$subaction == 'allnews' OR
$subaction == 'newposts' OR
$do == 'stats' OR
$do == 'admainlg' OR
$do == 'addnews' OR
$do == 'register' OR
$do == 'favorites' OR
$do == 'rules' OR
$do == 'pm' OR
$do == 'feedback' OR
$do == 'lastcomments' OR
$do == 'lostpassword' OR
$do == 'search' OR
$do == 'lastnews' OR
$do == 'alltags' OR
$do == 'tags' OR
$dle_module == 'date') $metatags .= <<<HTML
\n<meta name="robots" content="noindex,nofollow" />
HTML;


А в файле robots.txt прописать всего лишь

User-agent: *
Disallow: /engine/
Host: сайт
Sitemap: сайт/sitemap.xml
Вполне, так даже нужно делать.
Тоже интересно, как будет лучше, закрыть в роботс или так добавить через мета тег
Ну я просто поспрашивал. сказали что сам файл для яка не аргумент вапще. и лучше всего закрыть метатегом а в файле оставить основу с хостом и тд

Цитата
Евгений пишет:
Тоже интересно, как будет лучше, закрыть в роботс или так добавить через мета тег
Цитата
Никита Золотарев пишет:
Ну я просто поспрашивал. сказали что сам файл для яка не аргумент вапще. и лучше всего закрыть метатегом а в файле оставить основу с хостом и тд
Спасибо.

Думаю читали здесь _alaev.info/blog/post/3900 Список конечно намного побольше, но тут уж по желанию. У меня просто и категории конкерные закрыты то делал в шаблоне для них 
[category=3,6,7,9,10,11,12,13,14,16]<meta name="robots" content="noindex,nofollow" />[/category]
и также в роботс для уж точного контроля
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:42 Одновременно пропал трафик с гугл и яндекса 
20:50 Продвижение-2022: Гугл все? Нет – Гугл не все! 
21:10 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
16:39 Партнерская программа OWNR WALLET 
15:11 Adtrafico - Правильная партнёрская сеть под бурж трафик 
11:50 Очень много 404 ошибок в вэбмастере!? 
03:48 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
19:19 Ural-obmen.ru — выгодный сервис обмена 
19:04 Obama.ru - безопасный обмен криптовалют и электронных денежных средств 
12:17 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 
11:51 Google Voice - OLD аккаунты "SMS и звонки" 
17:08 TELEGRAM SOFT Gods\Expert - Многоцелевой комбайн по работе с телеграмм 
16:44 Сервис валидации e-mail баз 
16:09 Прием платежей для HIGH RISK | Прием платежей без сайта 
20:30 Точные прогнозы на футбол 
12:04 Как получить рефералов и посетителей на сайт бесплатно. 
18:31 Видимо, похороны СУПРа уже прошли как-то по-тихому 
12:48 Каспкрски ОС 
11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок 
15:24 Добро пожаловать в цифровой мир...