Подскажите правильный ли Robots
Страницы: 1
Подскажите правильный ли Robots
Здравствуйте! Подскажите правильный ли robots 


User-agent: *
Disallow: /engine/
Disallow: /*page/*
Host: сайт.ru
Sitemap: сайт/sitemap.xml


Спасибо
Цитата
Андрей Рыбаков пишет:
правильный ли robots
Идеально правильный
правда тут ошибка
вместо Sitemap: сайт/sitemap.xml нужно Sitemap: сайт.ru/sitemap.xml
Изменено: Принципал - 8 Июля 2017 22:44
Цитата
Андрей Рыбаков пишет:
Здравствуйте! Подскажите правильный ли robots


User-agent: *
Disallow: /engine/
Disallow: /*page/*
Host: сайт.ru
Sitemap: сайт/sitemap.xml


Спасибо
Можно и побольше что то добавить
Это DLE если я не ошибаюсь? В силу особенностей движка, там действительно можно еще добавить. Все зависит от того, что еще нужно спрятать. У меня был однажды в работе сайт на DLE, так там фильтры поиска приходилось еще скрывать. А вообще, чем меньше содержимое файла, тем проще для поисковика (где-то на серче вычитал).
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
13:54 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
14:50 Индексация страниц 
12:36 У кого новостник, дайте пару советов плиз 
13:53 AviTool - мощный инструмент для автоматизации работы с Avito 
17:01 Absence в Армении 
23:19 Ребята подскажите какими сервисами и прогами вы пользуетесь для SEO продвижения? 
14:50 Какую выбрать тему/нишу для сайта? 
13:20 GoodsMoney.io 
12:50 SpaceSwap.cc - Быстрый и надежный обменник криптовалют 
12:29 CactusPay.PRO | Умная платёжная система с выводом в USDT TRC-20 
12:04 Яндекс Вордстат Extension - браузерное расширение для сбора семантики 
11:49 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 
11:45 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно 
10:40 WebKazna. Обмены криптовалют. Доставка наличных. 
22:08 Накрутка поисковых подсказок 
05:04 Точные прогнозы на футбол 
14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
12:23 150+ хакерских поисковых систем и инструментов 
17:41 Стряхнуть обыденность - об Агасфере 
10:54 Добро пожаловать в цифровой мир...