Подскажите правильный ли Robots

Сообщений: 20 Регистрация: Мар 2015

8 Июля 2017 22:02

Здравствуйте! Подскажите правильный ли robots

User-agent: *
Disallow: /engine/
Disallow: /*page/*
Host: сайт.ru
Sitemap: сайт/sitemap.xml

Спасибо

Принципал

Сообщений: 1305 Регистрация: Июл 2012

8 Июля 2017 22:42

Цитата
Андрей Рыбаков пишет: правильный ли robots

Идеально правильный
правда тут ошибка
вместо Sitemap: сайт/sitemap.xml нужно Sitemap: сайт.ru/sitemap.xml

Изменено: Принципал - 8 Июля 2017 22:44

WGN

Сообщений: 9909 Регистрация: Июн 2015

9 Июля 2017 06:40

Цитата
Андрей Рыбаков пишет: Здравствуйте! Подскажите правильный ли robots User-agent: * Disallow: /engine/ Disallow: /page/ Host: сайт.ru Sitemap: сайт/sitemap.xml Спасибо

Можно и побольше что то добавить

✔(НЕЙРОСЕТЬ) Качественные живые посетители на ваш сайт, блог, канал — Бесплатно!!!

♛ЛУЧШИЙ ПРОВЕРЕННЫЙ и САМЫЙ НЕДОРОГОЙ ХОСТИНГ: АКЦИИ!

Egor2014 Сообщений: 447 Регистрация: Дек 2015	#4 9 Июля 2017 09:09 Это DLE если я не ошибаюсь? В силу особенностей движка, там действительно можно еще добавить. Все зависит от того, что еще нужно спрятать. У меня был однажды в работе сайт на DLE, так там фильтры поиска приходилось еще скрывать. А вообще, чем меньше содержимое файла, тем проще для поисковика (где-то на серче вычитал).

Новые темы	Объявления	Свободное общение
20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 18:53 Кнопки "скрыть" и "пожаловаться" в рекламе яндекса 15:29 OpenAI и шейхи: Цензура на продажу и "гибкие" идеалы амеров 13:26 Как безопасно купить Гугл почту? 10:59 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу	08:45 GhostRocket.pro — Взлетаем в новую эру криптообмена! 04:13 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 00:01 E-currency.exchange — ваш помощник в мире обменов 23:40 Monitex: Мониторинг с кэшбэком 80% в USDT 22:35 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 18:41 Веривикация Авито 17:37 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old	03:45 Гильотина для классиков: Клод доедает физические книги 01:24 Точные прогнозы на футбол 21:04 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 19:29 FIFA и Assassin’s Creed воруют пароли: В репаки зашили лютый стиллер. Чекаем логи 19:24 Туалетные секреты: Замурчательная тема 19:15 Сайты Рунета 15:15 ИИ-театр для инвесторов: почему виральные посты в Moltbook писали люди и в чем подвох OpenClaw

Новые темы

Объявления

Свободное общение

20:18 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией?
20:14 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках
20:11 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ?
18:53 Кнопки "скрыть" и "пожаловаться" в рекламе яндекса
15:29 OpenAI и шейхи: Цензура на продажу и "гибкие" идеалы амеров
13:26 Как безопасно купить Гугл почту?
10:59 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу

08:45 GhostRocket.pro — Взлетаем в новую эру криптообмена!
04:13 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
00:01 E-currency.exchange — ваш помощник в мире обменов
23:40 Monitex: Мониторинг с кэшбэком 80% в USDT
22:35 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
18:41 Веривикация Авито
17:37 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old

03:45 Гильотина для классиков: Клод доедает физические книги
01:24 Точные прогнозы на футбол
21:04 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе
19:29 FIFA и Assassin’s Creed воруют пароли: В репаки зашили лютый стиллер. Чекаем логи
19:24 Туалетные секреты: Замурчательная тема
19:15 Сайты Рунета
15:15 ИИ-театр для инвесторов: почему виральные посты в Moltbook писали люди и в чем подвох OpenClaw

28.01.2018 18:19	Подскажите как исправить
26.12.2017 23:23	Подскажите как сделать так в DLE XFlist
02.04.2017 15:13	https на DLE - правильный редирект в файле .htaccess
21.05.2016 10:45	Какой {title} будет правильный в названии материала?
12.04.2016 15:16	Подскажите с установкой DLE