Правильно ли составлен robots.txt

artem19951995

Сообщений: 72 Регистрация: Ноя 2010

8 Июня 2011 18:16

http://classanime.ru/robots.txt
Правильно если нет как нужно?

Сообщений: 4 Регистрация: Май 2011

8 Июня 2011 19:09

Вроде все норм, но Host лучше прописать сразу после User-agent. А Sitemap сразу после Host.
+ Измените у сайтмапов адрес http://classanime.3dn.ru на http://classanime.ru
Вот так:
User-agent: *
Host: classanime.ru
Sitemap: http://classanime.ru/sitemap.xml
Sitemap: http://classanime.ru/sitemap-forum.xml
Sitemap: http://classanime.ru/sitemap-shop.xml
Disallow: /a/
Disallow: /stat/
............
и т д

Изменено: prog_it - 8 Июня 2011 19:15

sanek Сообщений: 338 Регистрация: Май 2011	#3 8 Июня 2011 20:05 Правильно будет так: User-agent: * Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Disallow: /go? Sitemap: _classanime.3dn.ru/sitemap.xml Sitemap: _classanime.3dn.ru/sitemap-forum.xml Sitemap: _classanime.3dn.ru/sitemap-shop.xml User-agent: Yandex Host: classanime.ru И не ставь пробелы! Изменено: sanek - 8 Июня 2011 20:07 Доска бесплатных объявлений

Новые темы	Объявления	Свободное общение
21:17 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 21:08 Влияет ли кодировка на индексацию позиции в поиске? 19:48 Стоит ли добавлять сайт в Rambler топ 100? 17:32 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 14:51 Adtrafico - Правильная партнёрская сеть под бурж трафик 14:03 Партнерская программа OWNR WALLET 11:59 2Index - быстрая индексация страниц сайта и обратных ссылок	18:59 Сервис валидации e-mail баз 18:37 Ural-obmen.ru — выгодный сервис обмена 18:18 Obama.ru - безопасный обмен криптовалют и электронных денежных средств 17:28 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 11:00 SpeedyIndex - ускорение индексирования ссылок в Google. 100 ссылок в подарок. 10:41 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 22:18 SwapPix.io - быстрый и безопасный обменник криптовалют.	20:29 Точные прогнозы на футбол 21:12 Каспкрски ОС 22:58 У меня дикая просадка по РСЯ за последние 3 суток 21:51 Linux - это максимальная свобода 21:33 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 14:38 Продажи российских компьютеров в РФ выросли вдвое 12:29 Карпаты

Новые темы

Объявления

Свободное общение

21:17 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
21:08 Влияет ли кодировка на индексацию позиции в поиске?
19:48 Стоит ли добавлять сайт в Rambler топ 100?
17:32 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
14:51 Adtrafico - Правильная партнёрская сеть под бурж трафик
14:03 Партнерская программа OWNR WALLET
11:59 2Index - быстрая индексация страниц сайта и обратных ссылок

18:59 Сервис валидации e-mail баз
18:37 Ural-obmen.ru — выгодный сервис обмена
18:18 Obama.ru - безопасный обмен криптовалют и электронных денежных средств
17:28 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно
11:00 SpeedyIndex - ускорение индексирования ссылок в Google. 100 ссылок в подарок.
10:41 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика
22:18 SwapPix.io - быстрый и безопасный обменник криптовалют.

20:29 Точные прогнозы на футбол
21:12 Каспкрски ОС
22:58 У меня дикая просадка по РСЯ за последние 3 суток
21:51 Linux - это максимальная свобода
21:33 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
14:38 Продажи российских компьютеров в РФ выросли вдвое
12:29 Карпаты

23.09.2023 11:44	Правильно ли сделано на сайте?
27.12.2022 15:45	Как правильно перенести статьи на сайт из другого сайта
17.05.2021 17:21	Как правильно сделать seo-анализ сайта?
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
05.12.2020 10:20	Как правильно перенести сайт на международный домен?