Сайт на WP
Страницы: 1
Сайт на WP, Проблема с robots.txt
При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело?
Спасибо!

Бесплатная контекстная реклама

Цитата
Дмитрий Смирнов пишет:
При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело?
Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг. 
Лично я вот такой роботс на вп пользую 

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
12:17 Яндекс на ровном месте повесил метку "Некачественный сайт" 
12:14 Нет посетителей на сайте 
12:11 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 
09:50 Adsense личный опыт 
09:42 Adwords не открывается 
09:05 Апдейт 26 апреля Яндекс выдача 
08:51 Как правильно покупать ссылки для продвижения 
12:17 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 
11:29 Давайте меняться коментами на своих сайтах 
11:22 Персональные прокси сервера http/https + socks5 
10:56 Продам строительный сайт 
10:55 Размещу Ваши статьи на СДЛ по символичной цене 
10:29 Качественный прогон по трастовым сайтам и форумам. Рост ТИЦ, посещаемости и позиций. Множество отзывов, недорого + скидки 
08:36 Ищу работу рерайтером\копирайтером, наполнение сайтов и др., Ищу работу 
12:00 В Яндекс Вебмастере появились левые внешние ссылки. 
11:51 Яндекс признался, что блокирует сайты за рекламу 
11:45 Новая тизерная сеть Actionteaser.ru 
11:31 Как скопировать чужой сайт полностью в 2018 году? 
11:29 «Не нужны сегодня программисты» 
11:22 WAP.SeriousPartner.biz - во всем виноват WAP-Click! До 10р ребилл, Exclusive LP для ТОПов! 
09:36 Кому пришла выплата с AdSense?