Подскажите правильный ли Robots
Страницы: 1
Подскажите правильный ли Robots
Здравствуйте! Подскажите правильный ли robots 


User-agent: *
Disallow: /engine/
Disallow: /*page/*
Host: сайт.ru
Sitemap: сайт/sitemap.xml


Спасибо
Цитата
Андрей Рыбаков пишет:
правильный ли robots
Идеально правильный
правда тут ошибка
вместо Sitemap: сайт/sitemap.xml нужно Sitemap: сайт.ru/sitemap.xml
Изменено: Принципал - 8 Июля 2017 22:44
Цитата
Андрей Рыбаков пишет:
Здравствуйте! Подскажите правильный ли robots


User-agent: *
Disallow: /engine/
Disallow: /*page/*
Host: сайт.ru
Sitemap: сайт/sitemap.xml


Спасибо
Можно и побольше что то добавить
Это DLE если я не ошибаюсь? В силу особенностей движка, там действительно можно еще добавить. Все зависит от того, что еще нужно спрятать. У меня был однажды в работе сайт на DLE, так там фильтры поиска приходилось еще скрывать. А вообще, чем меньше содержимое файла, тем проще для поисковика (где-то на серче вычитал).
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
11:59 2Index - быстрая индексация страниц сайта и обратных ссылок 
21:31 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
20:24 Влияет ли кодировка на индексацию позиции в поиске? 
13:29 Buymedia.biz - рекламная сеть 
17:12 Bropush - твой бро в монетизации сайта push-уведомлениями 
15:02 Adtrafico - Правильная партнёрская сеть под бурж трафик 
09:06 Подскажите сервис который подскажет по каким самым нелепым запросам страница в топ-10 
13:59 DualCoin - быстрый криптовалютный обменник 
11:42 Дешевые просмотры YouTube с гарантией, лайки, подписчики Instagram, ВК, Facebook, ОK, Twitter - SmmPanele.Ru 
11:06 Google Voice - OLD аккаунты "SMS и звонки" 
08:00 Transit-Bit.com - Обмен USDT на IDR, THB, RUB и наличные 
20:30 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 
19:39 Ural-obmen.ru — выгодный сервис обмена 
19:30 Obama.ru - безопасный обмен криптовалют и электронных денежных средств 
06:05 Точные прогнозы на футбол 
21:12 Каспкрски ОС 
22:58 У меня дикая просадка по РСЯ за последние 3 суток 
21:51 Linux - это максимальная свобода 
21:33 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 
14:38 Продажи российских компьютеров в РФ выросли вдвое 
12:29 Карпаты