Помогите составить robots.txt
Страницы: 1
Помогите составить robots.txt, Ребята помогите составить правильный robots.txt
[FONT=Tahoma, Arial, Helvetica, sans-serif]У меня вот такой robots.txt.[/FONT]
[FONT=Tahoma, Arial, Helvetica, sans-serif]User-agent: Yandex
Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm

Что посоветуйте убрать? 
Просто яндекс добавляет в исключенные страницы вот такое /engine/download.php=1? и т.д, это ничего страшного и не как не влияет на выдачу? 
[/FONT]
Цитата
Дмитрий Кизенко пишет:
Просто яндекс добавляет в исключенные страницы вот такое /engine/download.php=1?
У меня такая же фигня лезит





Это без разницы, он просто указыват на страницы, которые, благодаря директивам robots.txt не индексируется, однако он знает об их наличии.Это не ошибка.
Цитата
Дмитрий Кизенко пишет:
Просто яндекс добавляет в исключенные страницы вот такое /engine/download.php=1? и т.д, это ничего страшного и не как не влияет на выдачу?
Конечно ничего страшного - это убирает дубли страниц, и не дает этому мусору выйти в серп.
Если что пишите, помогу разобраться
Всем большое спасибо. Тему можно закрывать...
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:24 Раскрутка форума 
00:19 Продвижение по ключам 
17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
14:07 2Index - быстрая индексация страниц сайта и обратных ссылок 
12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
22:23 Подскажите нормальный сервис накрутки ПФ 
09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
04:05 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
00:56 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
22:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
15:26 TETChange-Обменник криптовалют 
12:28 AlwaysMoney - платформа для обмена криптовалют 
01:35 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 
22:30 SOCKS5 приватные прокси на 30 дней для PayPal 
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 
20:43 Добро пожаловать в цифровой мир... 
15:59 Про мясо 
23:09 ПП от PMS remote.team - 200$ за команду 
13:28 Компьютерная мышь 
22:55 Ну что, кто куда деваете свои сайты? 
22:34 Используете беспроводные наушники?