Сайт на WP

Цитата
Дмитрий Смирнов пишет: При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело? Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг.
Лично я вот такой роботс на вп пользую

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml

Новые темы	Объявления	Свободное общение
12:17 Яндекс на ровном месте повесил метку "Некачественный сайт" 12:14 Нет посетителей на сайте 12:11 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 09:50 Adsense личный опыт 09:42 Adwords не открывается 09:05 Апдейт 26 апреля Яндекс выдача 08:51 Как правильно покупать ссылки для продвижения	12:17 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 11:29 Давайте меняться коментами на своих сайтах 11:22 Персональные прокси сервера http/https + socks5 10:56 Продам строительный сайт 10:55 Размещу Ваши статьи на СДЛ по символичной цене 10:29 Качественный прогон по трастовым сайтам и форумам. Рост ТИЦ, посещаемости и позиций. Множество отзывов, недорого + скидки 08:36 Ищу работу рерайтером\копирайтером, наполнение сайтов и др., Ищу работу	12:00 В Яндекс Вебмастере появились левые внешние ссылки. 11:51 Яндекс признался, что блокирует сайты за рекламу 11:45 Новая тизерная сеть Actionteaser.ru 11:31 Как скопировать чужой сайт полностью в 2018 году? 11:29 «Не нужны сегодня программисты» 11:22 WAP.SeriousPartner.biz - во всем виноват WAP-Click! До 10р ребилл, Exclusive LP для ТОПов! 09:36 Кому пришла выплата с AdSense?

Новые темы

Объявления

Свободное общение

12:17 Яндекс на ровном месте повесил метку "Некачественный сайт"
12:14 Нет посетителей на сайте
12:11 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт!
09:50 Adsense личный опыт
09:42 Adwords не открывается
09:05 Апдейт 26 апреля Яндекс выдача
08:51 Как правильно покупать ссылки для продвижения

12:17 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc
11:29 Давайте меняться коментами на своих сайтах
11:22 Персональные прокси сервера http/https + socks5
10:56 Продам строительный сайт
10:55 Размещу Ваши статьи на СДЛ по символичной цене
10:29 Качественный прогон по трастовым сайтам и форумам. Рост ТИЦ, посещаемости и позиций. Множество отзывов, недорого + скидки
08:36 Ищу работу рерайтером\копирайтером, наполнение сайтов и др., Ищу работу

12:00 В Яндекс Вебмастере появились левые внешние ссылки.
11:51 Яндекс признался, что блокирует сайты за рекламу
11:45 Новая тизерная сеть Actionteaser.ru
11:31 Как скопировать чужой сайт полностью в 2018 году?
11:29 «Не нужны сегодня программисты»
11:22 WAP.SeriousPartner.biz - во всем виноват WAP-Click! До 10р ребилл, Exclusive LP для ТОПов!
09:36 Кому пришла выплата с AdSense?

24.04.2018 08:05	10 хуков для Вордпресс
23.04.2018 20:34	Удалить вирус с сайта Worpdress
23.04.2018 15:35	Фатальная ошибка
22.04.2018 10:25	Вопрос по плагину MapSVG
09.04.2018 09:14	Нужен бесплатный плагин сайта знакомств