Yandex не обращает внимания на robots.txt
Страницы: 1
Yandex не обращает внимания на robots.txt
У меня в robots.txt Стоит

User-agent: Yandex

Host: treyd.org

Но Он мне Домен без www Сделал Зеркалом сайта с www , что это за игнор ?

Прогон по твиттеру, постинг в 1500 аккунтов
Постинг в твиттер аккаунты, для ускорения индексации ваших сайтов, сателлитов, дорвеев.

Код
User-agent: *
Disallow: /user/
Disallow: /subaction=userinfo
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=stats
Disallow: /do=pm
Disallow: /grab.php
Disallow: /ban.html

User-agent: Yandex 

Host: treyd.org

Crawl-delay: 3


Ваш роботс, а нужно


Код
User-agent: Yandex 
Disallow: /user/
Disallow: /subaction=userinfo
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=stats
Disallow: /do=pm
Disallow: /grab.php
Disallow: /ban.html
Host: treyd.org

User-agent: *
Disallow: /user/
Disallow: /subaction=userinfo
Disallow: /do=register
Disallow: /do=lostpassword
Disallow: /do=stats
Disallow: /do=pm
Disallow: /grab.php
Disallow: /ban.html
Sitemap: <a href=\"http://www.treyd.org/sitemap.xml\" target=\"_blank\">http://www.treyd.org/sitemap.xml</a>



И ждать месяц-полтора.
Изменено: Arte - 25 Июня 2011 14:27
Arte,

Спасибо большое
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
14:35 Как влияет смена шаблона на продвижение сайта? 
14:25 Пожалуйста помогите: низкая скорость загрузки сайта 
14:04 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
13:39 На сайт не приходят посетители - HELP 
12:36 Сегодня сильно упали позиции в Яндексе. Фильтр? 
12:21 Апдейт 27 июня 2017 
12:14 Аптейт тИЦ от 17 мая 2017 года 
14:45 Продаётся готовый сайт для фотографов или видеографов 
14:04 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
14:00 Качественный рерайтинг, копирайтинг 
13:56 Веб-дизайн сайтов различной тематики 
13:07 Сервис услуг в YouTube, Вконтакте, Instagram, Twitter, Facebook, Одноклассники, Google+ 
10:50 Акция! Дизайн сайта всего за 1000р 
10:25 Едем в топ 
14:49 Зарабатываем криптовалюту, слушая любимое радио 
10:32 title и вкладка браузера 
09:18 Как выйти из под фильтра fred ? 
09:01 А куда вы тратите доходы от ваших сайтов??? 
08:14 Всё о крипто-валюте 
18:18 Подскажите по 301 редиректу страниц. 
17:56 Продвинуть сайт за 2 месяца