Правильно ли составлен robots.txt
Страницы: 1
Правильно ли составлен robots.txt
http://classanime.ru/robots.txt
Правильно если нет как нужно?

Бесплатная контекстная реклама

Вроде все норм, но Host лучше прописать сразу после User-agent. А Sitemap сразу после Host.
+ Измените у сайтмапов адрес http://classanime.3dn.ru на http://classanime.ru
Вот так:
User-agent: *
Host: classanime.ru
Sitemap: http://classanime.ru/sitemap.xml
Sitemap: http://classanime.ru/sitemap-forum.xml
Sitemap: http://classanime.ru/sitemap-shop.xml
Disallow: /a/
Disallow: /stat/
............
и т д
Изменено: prog_it - 8 Июня 2011 19:15
Правильно будет так:

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /go?
Sitemap: _classanime.3dn.ru/sitemap.xml
Sitemap: _classanime.3dn.ru/sitemap-forum.xml
Sitemap: _classanime.3dn.ru/sitemap-shop.xml
User-agent: Yandex
Host: classanime.ru

И не ставь пробелы!
Изменено: sanek - 8 Июня 2011 20:07
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
09:58 Крауд-маркетинг - отзывы с прокачанных акков 
09:52 Внешние ссылки в вебмастере 
09:48 Апдейт ТИЦ 15 августа 2017 
09:46 Вопрос по Тиц 
09:42 17 августа 2017 апдейт Яндекса и тИЦ подвержденный 
09:29 Adsense личный опыт 
08:32 Плагин Wordpress для сравнения 
04:16 сайт загрузочной темы 
04:12 Продвижение в соц. сетях: ВК, Одноклассники, Instagram, Twitter, Facebook, YouTube 
00:55 Продам сайт с фото фэйками знаменитостей 
23:46 Размножение статей качественно 
21:00 Комплексная раскрутка сайтов. Качественные услуги, прогоны и прочее. (3000+ отзывов) 
20:53 Оцените сайт пожалуйста 
20:47 Оцените сайт пожалуйста 
09:57 Готовы ли заплатить за эксперимент? 
09:55 Как быстро выстреливают ссылки? 
09:48 Андроид игры и приложения 
08:52 Что с фейсбуком то творится ? 
03:00 А зачем нужны прогоны? 
21:57 Апдейты тИЦ Яндекса от 16 августа 2017 
21:12 Биткоин растет как не по дням, а по часам!