Yandex не обращает внимания на robots.txt
Страницы: 1
Yandex не обращает внимания на robots.txt
У меня в robots.txt Стоит

User-agent: Yandex

Host: treyd.org

Но Он мне Домен без www Сделал Зеркалом сайта с www , что это за игнор ?

Бесплатная контекстная реклама

Код
User-agent: *
Disallow: /user/
Disallow: /subaction=userinfo
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=stats
Disallow: /do=pm
Disallow: /grab.php
Disallow: /ban.html

User-agent: Yandex 

Host: treyd.org

Crawl-delay: 3


Ваш роботс, а нужно


Код
User-agent: Yandex 
Disallow: /user/
Disallow: /subaction=userinfo
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=stats
Disallow: /do=pm
Disallow: /grab.php
Disallow: /ban.html
Host: treyd.org

User-agent: *
Disallow: /user/
Disallow: /subaction=userinfo
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=stats
Disallow: /do=pm
Disallow: /grab.php
Disallow: /ban.html
Sitemap: <a href=\"http://www.treyd.org/sitemap.xml\" target=\"_blank\">http://www.treyd.org/sitemap.xml</a>



И ждать месяц-полтора.
Изменено: Arte - 25 Июня 2011 14:27
Arte,

Спасибо большое
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
20:05 Дизайн сайтов качественно, недорого! 
20:02 Апдейт Яндекса 09.12.2016 
19:53 молодой сайт в топе 
18:37 Вопрос к тем, кто переходил на https с Вордпрессом 
18:24 Вопрос к веб мастерам 
18:06 Закрывать или индексировать категории? 
17:40 Смена адреса админ панели WordPress 
20:35 Стоимость сайта 
19:34 Продам хороший, доходный сайт с ТИЦ 40 
19:23 Услуги по созданию логотипов, баннеров, визиток. Возможны другие предложения работы с графикой. 
18:01 Рерайт 30 р за 1000 символов без пробелов 
15:53 Недвижимость без посредников 
15:45 ​ Услуга в соц.сетях: поиск аккаунтов по номеру телефона или email 
14:45 [Продажа] скрипт CPA/CPS-партнерской программы 
20:20 Новых страниц нет, а переходы есть 
19:51 Не открывается teasernet.com 
19:35 Сколково Телеком (Skt.ru) партнерская программа 50% на хостинг 
18:47 Нужно ли закрывать рекламные блоки? 
18:22 Про счетчики 
15:14 Uber запретил заниматься сексом во время поездки 
14:55 Mobytize и Vipaff приглашают на мероприятие IT Nature Party! 17-19 августа (Киев)