Yandex не обращает внимания на robots.txt
Страницы: 1
Yandex не обращает внимания на robots.txt
У меня в robots.txt Стоит

User-agent: Yandex

Host: treyd.org

Но Он мне Домен без www Сделал Зеркалом сайта с www , что это за игнор ?

Бесплатная контекстная реклама

Код
User-agent: *
Disallow: /user/
Disallow: /subaction=userinfo
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=stats
Disallow: /do=pm
Disallow: /grab.php
Disallow: /ban.html

User-agent: Yandex 

Host: treyd.org

Crawl-delay: 3


Ваш роботс, а нужно


Код
User-agent: Yandex 
Disallow: /user/
Disallow: /subaction=userinfo
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=stats
Disallow: /do=pm
Disallow: /grab.php
Disallow: /ban.html
Host: treyd.org

User-agent: *
Disallow: /user/
Disallow: /subaction=userinfo
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=stats
Disallow: /do=pm
Disallow: /grab.php
Disallow: /ban.html
Sitemap: <a href=\"http://www.treyd.org/sitemap.xml\" target=\"_blank\">http://www.treyd.org/sitemap.xml</a>



И ждать месяц-полтора.
Изменено: Arte - 25 Июня 2011 14:27
Arte,

Спасибо большое
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
17:03 26 апреля 2017 Яндекс выдача 
16:36 Adsense личный опыт 
16:36 Как лучше распределить беклинки 
15:33 Яндекс обнулил всем значение тИЦ? 
15:13 Ошибка при валидации 
14:53 html код онлайн трансляции 
14:42 Подскажите хостинг с нормальной защитой от DDOS 
16:39 Сайт "под ключ" с полной внутренней оптимизацией - бесплатно 
16:05 Продам сайт на тему игры "Моя кофейня" 
14:14 Качественный прогон по трастовым сайтам и форумам. Рост ТИЦ, посещаемости и позиций. Множество отзывов, недорого + скидки 
14:13 Продам Сайт о мужских хобби - РСЯ, Адсенс, Миралинкс 
12:19 Ссылки на сайтах с полезными советами 
10:51 АнтиРайтер - система добычи бесплатных тематических статей 
07:50 Услуга по поднятию Тиц сайтов. Оплата единоразовая! 
17:22 Как сделать ПРОГНОЗ КЛЕВА 
17:05 Ищем не на чем сэкономить, а на чем заработать! 
16:39 Советую вместо дом2 послушать аудиокнигу "Мани, или Азбука денег" Автор: Бодо Шефер 
15:05 Где вы работаете онлайн (физическое нахождение вашего тела)? 
14:00 IQRevenue - CPA партнерка. 
12:54 Абузоустойчивый SMTP сервер в аренду (BulletProof SMTP Server) 
11:54 (продолжение) 100 человек живых в группу с приглашений ВКонтакте за отзыв