Правильно ли составлен robots.txt
Страницы: 1
Правильно ли составлен robots.txt
http://classanime.ru/robots.txt
Правильно если нет как нужно?

Бесплатная контекстная реклама

Вроде все норм, но Host лучше прописать сразу после User-agent. А Sitemap сразу после Host.
+ Измените у сайтмапов адрес http://classanime.3dn.ru на http://classanime.ru
Вот так:
User-agent: *
Host: classanime.ru
Sitemap: http://classanime.ru/sitemap.xml
Sitemap: http://classanime.ru/sitemap-forum.xml
Sitemap: http://classanime.ru/sitemap-shop.xml
Disallow: /a/
Disallow: /stat/
............
и т д
Изменено: prog_it - 8 Июня 2011 19:15
Правильно будет так:

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /go?
Sitemap: _classanime.3dn.ru/sitemap.xml
Sitemap: _classanime.3dn.ru/sitemap-forum.xml
Sitemap: _classanime.3dn.ru/sitemap-shop.xml
User-agent: Yandex
Host: classanime.ru

И не ставь пробелы!
Изменено: sanek - 8 Июня 2011 20:07
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
13:56 Bodyclick.net - рекламная партнерская сеть. 
13:28 Как сделать шаги выполнения 
13:19 Поиск №1 в России - сам себя не похвалишь... 
13:17 Сверстаю, помогу исправить или доверстать бесплатно 
13:00 Подскажите как правильно прописать урлы, например на Смартфон Samsung Galaxy J7 ? 
12:49 27 июля 2017 апдейт Яндекса 
12:16 Рекламная сеть яндекса личный опыт 
12:38 Продаю постовые на сайте развлекательной тематики 
12:19 Профильный прогон 200 рублей, ТИЦ от 10, проверен Checktrust 
11:35 Статейные прогоны, цена от 20$ ▶ опыт и качество!, Множество сайтов на различных cms. 
11:32 Качественная регистрация на трастовых сайтах и форумах. Множество cms. Цены от 250 рублей. 
11:11 Автоматический сервис продвижения(накрутки). 18 соц сетей! Бонус местным! 
09:33 Глобальное обновление! Более 1000 площадок под размещение вечных статей + супер АКЦИЯ! 
06:09 Продам сайт, очень срочно, с доходом! 
13:55 Тематика сайта 
13:39 Подскажите посещаемые доски объявлений 
13:25 Ищу владельцев идентичных сайтов 
12:32 Игра с текстом 
12:24 Зерокул наказан за мошенничество 
11:22 Велотренажёр дома? 
09:07 Реклама на сайте