Правильно ли сделан Robots.txt для Dle
Страницы: 1
[ Закрыто ] Правильно ли сделан Robots.txt для Dle, Правильно ли сделан Robots.txt для Dle
Помогите! Правильный ли такой вариант
 Robots.txt для Dle


User-agent: *
Allow: /uploads/posts/
Disallow: /engine/go.php
Disallow: /favorites/
Disallow: /cache/
Disallow: /cgi-bin/
Disallow: /page/
Disallow: */page/*
Disallow: /engine/
Disallow: /language/
Disallow: /templates/
Disallow: /uploads/
Disallow: /backup/
Disallow: /newposts/
Disallow: /lastnews/
Disallow: /catalog/
Disallow: /tags/
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /statistics.html
Disallow: /banners/
Disallow: /user/
Disallow: /2011/
Disallow: /*action=mobile$
Disallow: /do=*
Disallow: /*do=*
Disallow: /?*
Host: урл сайта
Sitemap: http://урл сайта/sitemap.xml
Disallow: /page/
Disallow: */page/*
Эти две строчки равносильны, у меня стоит только первый вариант

Так же в моем имеются вот такие строчки:
Disallow: /*print
Disallow: /2012/
Disallow: /2013/
Disallow: /2014/
Disallow: /index.php?subaction=*
Disallow: /statistics.html
Disallow: /rules.html
Disallow: /addnews.html
Цитата
Katrin пишет:
Disallow: /page/
Disallow: */page/*
Эти две строчки равносильны, у меня стоит только первый вариант
Но разницы не ту, будет две или одна, правильно ? Просто лишнее место занимает.
Изменено: Юра Юрченко - 31 Декабря 2013 23:23
Цитата
Katrin пишет:
Disallow: /page/
Disallow: */page/*
Эти две строчки равносильны, у меня стоит только первый вариант

Так же в моем имеются вот такие строчки:
Disallow: /*print
Disallow: /2012/
Disallow: /2013/
Disallow: /2014/
Disallow: /index.php?subaction=*
Disallow: /statistics.html
Disallow: /rules.html
Disallow: /addnews.html
А что они запрещают ? Именно вот Disallow: /*print
Изменено: Юра Юрченко - 31 Декабря 2013 23:26
Юра Юрченко, smile:) искать не буду, с проиндексированных страниц вылавливала и убирала, все что мне не нужно в поиске.
Цитата
Katrin пишет:
Юра Юрченко, smile:) искать не буду, с проиндексированных страниц вылавливала и убирала, все что мне не нужно в поиске.
Понятно, и еще один вопрос. С Robots.txt сразу затупил, и теперь в индексе не нужные страницы. Сейчас вроде их запретил, если их не удалять через вебмастер гугла и яши, как быстро они сами отпадут.
Юра Юрченко,  в яше обычно в течении месяца отваливаются, гугл быстро хавает, но трудно расстается, от чего в гугле вечно соплями все висит)))
Цитата
Katrin пишет:
Юра Юрченко, в яше обычно в течении месяца отваливаются, гугл быстро хавает, но трудно расстается, от чего в гугле вечно соплями все висит)))
Спасибо большое Katrin за помощь. Вы ответили на все что мне нужно было. Ветку можно закрывать smile:)
Пожалуйста.
Тема закрыта.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
17:53 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
22:27 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
12:39 2Index - быстрая индексация страниц сайта и обратных ссылок 
06:17 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам). 
23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
21:20 Rotapost прикрыли! Чем пользоваться? 
02:14 Сервис смс активаций и аренды мобильных номеров ALISMS 
22:06 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
22:04 Услуги продвижения в авито 
21:00 Onechange.me — надежный обменник криптовалют и фиатных средств 
20:57 Форекс Лиды, Горячий Трафик Форекс, Лиды Форекс 2025, Горячий Трафик Крипто, Целевые Лиды Гэмблинг, Финансовые Рынки Лиды 
18:53 secrex.io обмен без лишних вопросов (NO AML) 
15:41 Запустите свой обменник за 1 день без программиста и серверов — облачная платформа EX365 
22:05 С юмором по жизни! 
13:08 Бесплатный майнинг Tether (USDT) 
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 
20:43 Добро пожаловать в цифровой мир... 
15:59 Про мясо 
23:09 ПП от PMS remote.team - 200$ за команду 
13:28 Компьютерная мышь