Правильно ли составлен robots.txt

artem19951995

Сообщений: 72 Регистрация: Ноя 2010

8 Июня 2011 18:16

http://classanime.ru/robots.txt
Правильно если нет как нужно?

Сообщений: 4 Регистрация: Май 2011

8 Июня 2011 19:09

Вроде все норм, но Host лучше прописать сразу после User-agent. А Sitemap сразу после Host.
+ Измените у сайтмапов адрес http://classanime.3dn.ru на http://classanime.ru
Вот так:
User-agent: *
Host: classanime.ru
Sitemap: http://classanime.ru/sitemap.xml
Sitemap: http://classanime.ru/sitemap-forum.xml
Sitemap: http://classanime.ru/sitemap-shop.xml
Disallow: /a/
Disallow: /stat/
............
и т д

Изменено: prog_it - 8 Июня 2011 19:15

sanek Сообщений: 338 Регистрация: Май 2011	#3 8 Июня 2011 20:05 Правильно будет так: User-agent: * Disallow: /a/ Disallow: /stat/ Disallow: /index/1 Disallow: /index/2 Disallow: /index/3 Disallow: /index/5 Disallow: /index/7 Disallow: /index/8 Disallow: /index/9 Disallow: /panel/ Disallow: /admin/ Disallow: /secure/ Disallow: /informer/ Disallow: /mchat Disallow: /search Disallow: /go? Sitemap: _classanime.3dn.ru/sitemap.xml Sitemap: _classanime.3dn.ru/sitemap-forum.xml Sitemap: _classanime.3dn.ru/sitemap-shop.xml User-agent: Yandex Host: classanime.ru И не ставь пробелы! Изменено: sanek - 8 Июня 2011 20:07 Доска бесплатных объявлений

Новые темы	Объявления	Свободное общение
15:26 Найти элемент в коде 15:06 Сайты-копипасты 11:51 Bropush - твой бро в монетизации сайта push-уведомлениями 21:47 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 09:59 Ошибка после размещения кода HTML! 15:34 Adtrafico - Правильная партнёрская сеть под бурж трафик 14:43 Партнерская программа OWNR WALLET	16:11 ZennoPoster - софт №1 для автоматизации любых SEO задач! 13:30 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 13:22 Burzh.top\|Партнерская программа под любой вид трафика (email, спам, УБТ) 09:42 ProxyWins.com - 15% по промо-коду "venividivici" 04:47 BetaTransfer касса — это надежный сервис приема платежей в сфере High Risk 16:38 Belurk — высокоскоростные анонимные прокси от 0,24 рублей 15:28 Ural-obmen.ru — выгодный сервис обмена	12:48 Каспкрски ОС 11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 01:05 Точные прогнозы на футбол 14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок 15:24 Добро пожаловать в цифровой мир... 22:58 У меня дикая просадка по РСЯ за последние 3 суток 21:51 Linux - это максимальная свобода

Новые темы

Объявления

Свободное общение

15:26 Найти элемент в коде
15:06 Сайты-копипасты
11:51 Bropush - твой бро в монетизации сайта push-уведомлениями
21:47 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
09:59 Ошибка после размещения кода HTML!
15:34 Adtrafico - Правильная партнёрская сеть под бурж трафик
14:43 Партнерская программа OWNR WALLET

16:11 ZennoPoster - софт №1 для автоматизации любых SEO задач!
13:30 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика
13:22 Burzh.top|Партнерская программа под любой вид трафика (email, спам, УБТ)
09:42 ProxyWins.com - 15% по промо-коду "venividivici"
04:47 BetaTransfer касса — это надежный сервис приема платежей в сфере High Risk
16:38 Belurk — высокоскоростные анонимные прокси от 0,24 рублей
15:28 Ural-obmen.ru — выгодный сервис обмена

12:48 Каспкрски ОС
11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
01:05 Точные прогнозы на футбол
14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок
15:24 Добро пожаловать в цифровой мир...
22:58 У меня дикая просадка по РСЯ за последние 3 суток
21:51 Linux - это максимальная свобода

23.09.2023 11:44	Правильно ли сделано на сайте?
27.12.2022 15:45	Как правильно перенести статьи на сайт из другого сайта
17.05.2021 17:21	Как правильно сделать seo-анализ сайта?
05.12.2020 10:26	Как правильно закрыть категорию в robots.txt
05.12.2020 10:20	Как правильно перенести сайт на международный домен?