Подскажите правильный robots для DLE
Страницы: 1
Подскажите правильный robots для DLE
Сайт женской тематики, нет такого что бы было-  категория (первые блюда) -> под категория ( супы) -> раздел ( суп рыбный) .
Сейчас на сайте такой robots:


User-agent: *
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /*do=search
Host: rururu.ru
Sitemap: _http://rurururu/sitemap.xml
Как его сделать лучше,???
Изменено: Кот - 15 Февраля 2014 20:37
баня под ключ не дорого
Цитата
Кот пишет:
Сейчас на сайте такой robots:
Как его сделать лучше,???
Так
Изменено: mozambik - 15 Февраля 2014 20:49
Спрошу по другому как его лучше настроить??
Цитата
Кот пишет:
нет такого что бы было- категория (первые блюда) -> под категория ( супы) -> раздел ( суп рыбный)
В принципе за это не robors.txt отвечает.
Если я Вас правильно понял Вам нужны красивые сниппеты?
Цитата
АнтиП Замкадов пишет:
Если я Вас правильно понял Вам нужны красивые сниппеты?
Нет мне надо что бы сайт индексировался, так сказать робота ПС встряхнуть что бы что то новое и полезное было ))
Либо так еще можно сказать: что в этом robots не правильно ??? и что можно либо нужно изменить???
Цитата
Кот пишет:
Либо так еще можно сказать: что в этом robots не правильно ??? и что можно либо нужно изменить???
Продолжаете искать худшее из лучшего?
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
11:22 Как безопасно купить Гугл почту? 
11:17 ЕС душит ТикТок: прощай бесконечная лента и RPM? Что с монетизацией? 
11:12 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 
11:05 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
10:59 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу 
09:46 OpenAI и шейхи: Цензура на продажу и "гибкие" идеалы амеров 
01:09 Yahoo Scout: Нейро-привет из склепа. Реальный шанс на траф или мимо? 
08:58 Мониторинг обменников Сrypto-scout.io 
04:09 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
02:31 Профессиональный и грамотный дизайн от DesignCash 
18:27 Nexulume.com Обменник без AML и KYC 
15:45 Mixmasters - Exchange without AML and KYC 
10:22 Swapwatch.org — Мониторинг криптовалютных обменников 
10:19 SwapPix.io - быстрый и безопасный обменник криптовалют. 
11:24 FIFA и Assassin’s Creed воруют пароли: В репаки зашили лютый стиллер. Чекаем логи 
10:52 Кулеры и БП станут золотыми? Медь по 13 штук, олово в космосе 
08:50 Гильотина для классиков: Клод доедает физические книги 
05:10 Точные прогнозы на футбол 
18:34 Ставки на супер тренды в спорте 
11:10 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес