Правильно ли составил robots.txt?

Правильно ли составил robots.txt? Нет ничего лишнего ?

User-agent: Yandex
Disallow: /*print
Disallow: /user/
Disallow: /backup/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /page/
Disallow: /tags

User-agent: *
Disallow: /*print
Disallow: /user/
Disallow: /backup/
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /upgrade/
Disallow: /uploads/
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /index.php?do=addnews
Disallow: /index.php?do=feedback
Disallow: /index.php?do=lostpassword
Disallow: /index.php?do=pm
Disallow: /index.php?do=register
Disallow: /index.php?do=stats
Disallow: /index.php?do=search
Disallow: /index.php?subaction=newposts
Disallow: /?do=lastcomments
Disallow: /statistics.html
Disallow: /page/
Disallow: /tags

Host: сайт
Sitemap: http://сайт/sitemap.xml

Новые темы	Объявления	Свободное общение
16:07 Работаем в P2P платежах BYBIT \| USDT - RUB , RUB - USDT \| Ищем постоянных клиентов , выгодные условия. 10:44 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 20:13 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 19:41 25$ (ежемесячно) AdSense 21:39 Подскажите где продвигать сайт. 10:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 19:12 Мошенники-копирайтеры	23:23 STREAM X CASH — Ваш амбициозный и надежный партнер в сфере криптообмена 20:37 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 18:57 Обменник криптовалют Saint-Exchange 16:21 AllCharge.online. Современный, быстрый и надёжный обменник 14:02 SiteAnalyzer SEO Tools - бесплатное браузерное расширение для Chrome & Firefox 12:25 Продам Домены .COM с историей трафика. 11:21 SpaceSwap.cc - Быстрый и надежный обменник криптовалют	00:37 Точные прогнозы на футбол 23:47 Добро пожаловать в цифровой мир... 22:39 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 11:58 Куплю проигрышные букмекерские аккаунты 00:12 Огородники 10:59 Новости искусственного интеллекта 04:26 Хром ругается на форум

Новые темы

Объявления

Свободное общение

16:07 Работаем в P2P платежах BYBIT | USDT - RUB , RUB - USDT | Ищем постоянных клиентов , выгодные условия.
10:44 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов
20:13 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
19:41 25$ (ежемесячно) AdSense
21:39 Подскажите где продвигать сайт.
10:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг
19:12 Мошенники-копирайтеры

23:23 STREAM X CASH — Ваш амбициозный и надежный партнер в сфере криптообмена
20:37 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
18:57 Обменник криптовалют Saint-Exchange
16:21 AllCharge.online. Современный, быстрый и надёжный обменник
14:02 SiteAnalyzer SEO Tools - бесплатное браузерное расширение для Chrome & Firefox
12:25 Продам Домены .COM с историей трафика.
11:21 SpaceSwap.cc - Быстрый и надежный обменник криптовалют

00:37 Точные прогнозы на футбол
23:47 Добро пожаловать в цифровой мир...
22:39 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор
11:58 Куплю проигрышные букмекерские аккаунты
00:12 Огородники
10:59 Новости искусственного интеллекта
04:26 Хром ругается на форум

26.06.2019 18:48	Сайт неправильно отдаёт 404
25.10.2017 05:49	Помогите разобраться,как правильно переехать с dle в wordpress
12.01.2017 22:21	Как правильно настроить 301 редирект?
09.04.2016 08:05	Правильно ли настроено .htaccess и robots.txt
18.06.2015 18:03	Помогите настроить правильно редиректы для DLE

Rich Dad Сообщений: 487 Регистрация: Окт 2011	#1 21 Ноября 2016 15:09 Правильно ли составил robots.txt? Нет ничего лишнего ? User-agent: Yandex Disallow: /print Disallow: /user/ Disallow: /backup/ Disallow: /engine/ Disallow: /language/ Disallow: /templates/ Disallow: /upgrade/ Disallow: /uploads/ Disallow: /autobackup.php Disallow: /admin.php Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?do=pm Disallow: /index.php?do=register Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /?do=lastcomments Disallow: /statistics.html Disallow: /page/ Disallow: /tags User-agent: Disallow: /*print Disallow: /user/ Disallow: /backup/ Disallow: /engine/ Disallow: /language/ Disallow: /templates/ Disallow: /upgrade/ Disallow: /uploads/ Disallow: /autobackup.php Disallow: /admin.php Disallow: /index.php?do=addnews Disallow: /index.php?do=feedback Disallow: /index.php?do=lostpassword Disallow: /index.php?do=pm Disallow: /index.php?do=register Disallow: /index.php?do=stats Disallow: /index.php?do=search Disallow: /index.php?subaction=newposts Disallow: /?do=lastcomments Disallow: /statistics.html Disallow: /page/ Disallow: /tags Host: сайт Sitemap: http://сайт/sitemap.xml