Подскажите правильный ли Robots
Страницы: 1
Подскажите правильный ли Robots
Здравствуйте! Подскажите правильный ли robots 


User-agent: *
Disallow: /engine/
Disallow: /*page/*
Host: сайт.ru
Sitemap: сайт/sitemap.xml


Спасибо

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

Цитата
Андрей Рыбаков пишет:
правильный ли robots
Идеально правильный
правда тут ошибка
вместо Sitemap: сайт/sitemap.xml нужно Sitemap: сайт.ru/sitemap.xml
Изменено: Принципал - 8 Июля 2017 22:44
Цитата
Андрей Рыбаков пишет:
Здравствуйте! Подскажите правильный ли robots


User-agent: *
Disallow: /engine/
Disallow: /*page/*
Host: сайт.ru
Sitemap: сайт/sitemap.xml


Спасибо
Можно и побольше что то добавить
Это DLE если я не ошибаюсь? В силу особенностей движка, там действительно можно еще добавить. Все зависит от того, что еще нужно спрятать. У меня был однажды в работе сайт на DLE, так там фильтры поиска приходилось еще скрывать. А вообще, чем меньше содержимое файла, тем проще для поисковика (где-то на серче вычитал).
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
14:57 Помогите настроить сайт 
14:50 WebVisitor - улучшение и накрутка поведенческих факторов ранжирования вашего сайта. 
13:54 Помогите выявить вирус. 
13:08 18.11 Апдейт Яндекс выдача | Влияние уникальности изображений 
11:06 21 ноября 2019 Яндекс выдача | 
07:41 Как закрыть данные в сервисе cy-pr, от посторонних? 
00:37 Просел траффик с ГУГЛ 
14:39 Баннеры с minecraft сайтов 
11:20 OnePlugin – плагин WordPress для работы с API ПП 
11:11 DLE-Parser.ru - скачивание шаблонов с DLE (DataLife Engine) сайтов 
09:16 Продам аккаунт гугл адсенс с балансом 43 доллара 
08:23 Куплю стать на разные тематики. 
23:01 Human Emulator. Автоматизация действий пользователя в браузере. 
21:42 Продам! мониторинг игровых серверов - CS-SERV.NET 
08:11 Продам свой пустой блог в ЖЖ. ТИЦ 0 \ PR 0 
15:21 RXbux - новая европейская фарма партнёрка. Комиссия до 45% за ордер! 
15:10 Самый современный в мире, новейший веб-каталог | Цифровая сторона вашего сайта 
13:44 Рекламная CPA сеть PUSH.SHOW - прямая монетизация вашего трафика для вебмастера и арбитражника 
07:00 Партнерская программа №1 в РФ по ремонту компьютерной и бытовой техники! (CPA 1000р) 
16:14 4 ключа к Elite-Board 2.3 (400 руб.) 
13:03 Все хотят украсть мой трастовый аккаунт ВК