Подскажите правильный ли Robots

Сообщений: 20 Регистрация: Мар 2015

8 Июля 2017 22:02

Здравствуйте! Подскажите правильный ли robots

User-agent: *
Disallow: /engine/
Disallow: /*page/*
Host: сайт.ru
Sitemap: сайт/sitemap.xml

Спасибо

Принципал

Сообщений: 1305 Регистрация: Июл 2012

8 Июля 2017 22:42

Цитата
Андрей Рыбаков пишет: правильный ли robots

Идеально правильный
правда тут ошибка
вместо Sitemap: сайт/sitemap.xml нужно Sitemap: сайт.ru/sitemap.xml

Изменено: Принципал - 8 Июля 2017 22:44

WGN

Сообщений: 9908 Регистрация: Июн 2015

9 Июля 2017 06:40

Цитата
Андрей Рыбаков пишет: Здравствуйте! Подскажите правильный ли robots User-agent: * Disallow: /engine/ Disallow: /page/ Host: сайт.ru Sitemap: сайт/sitemap.xml Спасибо

Можно и побольше что то добавить

✔(НЕЙРОСЕТЬ) Качественные живые посетители на ваш сайт, блог, канал — Бесплатно!!!

♛ЛУЧШИЙ ПРОВЕРЕННЫЙ и САМЫЙ НЕДОРОГОЙ ХОСТИНГ: АКЦИИ!

Egor2014 Сообщений: 447 Регистрация: Дек 2015	#4 9 Июля 2017 09:09 Это DLE если я не ошибаюсь? В силу особенностей движка, там действительно можно еще добавить. Все зависит от того, что еще нужно спрятать. У меня был однажды в работе сайт на DLE, так там фильтры поиска приходилось еще скрывать. А вообще, чем меньше содержимое файла, тем проще для поисковика (где-то на серче вычитал).

Новые темы	Объявления	Свободное общение
18:44 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 13:43 Стоит ли добавлять сайт в Rambler топ 100? 13:12 Покупные ссылки 12:57 Rotapost прикрыли! Чем пользоваться? 15:12 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026 15:01 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 07:24 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг	15:15 Продажа горячих лидов и готовых баз для финансовых проектов, брокеров и чарджбэк-компаний. 08:39 Мониторинг обменников Сrypto-scout.io 04:11 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 22:59 SnapSwap.io — мгновенный обмен BTC, XMR, ETH, USDT и других криптовалют без регистрации! 21:50 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 14:47 CryptoMonitor.info - ваш надеждный обменник BTC USDT XMR (без KYC) 12:40 Mixmasters - Exchange without AML and KYC	22:59 Про мясо 15:07 Добро пожаловать в цифровой мир... 22:12 BYTIK.shop – сервис по продвижению в популярных социальных сетях 10:10 накрутка трафика в SimilarWeb 16:50 Компьютерная мышь 22:11 С юмором по жизни! 23:03 Точные прогнозы на футбол

Новые темы

Объявления

Свободное общение

18:44 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
13:43 Стоит ли добавлять сайт в Rambler топ 100?
13:12 Покупные ссылки
12:57 Rotapost прикрыли! Чем пользоваться?
15:12 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026
15:01 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
07:24 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг

15:15 Продажа горячих лидов и готовых баз для финансовых проектов, брокеров и чарджбэк-компаний.
08:39 Мониторинг обменников Сrypto-scout.io
04:11 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
22:59 SnapSwap.io — мгновенный обмен BTC, XMR, ETH, USDT и других криптовалют без регистрации!
21:50 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
14:47 CryptoMonitor.info - ваш надеждный обменник BTC USDT XMR (без KYC)
12:40 Mixmasters - Exchange without AML and KYC

22:59 Про мясо
15:07 Добро пожаловать в цифровой мир...
22:12 BYTIK.shop – сервис по продвижению в популярных социальных сетях
10:10 накрутка трафика в SimilarWeb
16:50 Компьютерная мышь
22:11 С юмором по жизни!
23:03 Точные прогнозы на футбол

28.01.2018 18:19	Подскажите как исправить
26.12.2017 23:23	Подскажите как сделать так в DLE XFlist
02.04.2017 15:13	https на DLE - правильный редирект в файле .htaccess
21.05.2016 10:45	Какой {title} будет правильный в названии материала?
12.04.2016 15:16	Подскажите с установкой DLE