Сайт на WP

Цитата
Дмитрий Смирнов пишет: При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело? Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг.
Лично я вот такой роботс на вп пользую

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml

Новые темы	Объявления	Свободное общение
22:08 Нетематические разделы на сайте - мешают или помогают? 21:30 Запустили интернет магазин по стройматериалам месяц назад. Как продвигать в поиске? 20:56 19 сентября 2017 текстовой апдейт Яндекса 19:41 Нагрузка на сервер 18:27 Партнерская программа NutriProfits - зарабатывай до 40% за сейл! 17:49 TeaserNet - тизерная сеть нового поколения! Высокие доходы, стабильные выплаты 17:18 Уникальная партнерская программа Gambling Partners!	22:09 Качественный прогон Хрумером, Zennoposterом всего 10 WMZ, Большой опыт работы. Статьи, комментарии, профиля, гостевые. 21:50 200 открытых анкорных ссылок всего за 100 рублей 21:42 XMLGold.eu (Perfect Money, Bank wire, Bitcoin, Litecoin, AdvCash, Payeer, Paypal) 21:32 Продам 8 сайтов в ГГЛ 20:38 Куплю размещение статей на англоязычных ресурсах 20:13 ТиЦ 250. Игровой сайт 19:59 Качественные профильные и статейные прогоны хрумером по своим базам!	22:35 Дробим высокочастотный запрос на СЧ и НЧ в директе 21:52 Трудовой стаж для фрилансеров в Украине? 20:20 Активация аккаунта адсенс 20:02 301 redirect 18:03 Осенний чат на форуме / говорите о своём 17:29 Мануал как можно заработать деньги на финансовой партнерке Share4you 17:13 [CPT]#CRYPTAUR- магазин децентрализованных приложений.

Новые темы

Объявления

Свободное общение

22:08 Нетематические разделы на сайте - мешают или помогают?
21:30 Запустили интернет магазин по стройматериалам месяц назад. Как продвигать в поиске?
20:56 19 сентября 2017 текстовой апдейт Яндекса
19:41 Нагрузка на сервер
18:27 Партнерская программа NutriProfits - зарабатывай до 40% за сейл!
17:49 TeaserNet - тизерная сеть нового поколения! Высокие доходы, стабильные выплаты
17:18 Уникальная партнерская программа Gambling Partners!

22:09 Качественный прогон Хрумером, Zennoposterом всего 10 WMZ, Большой опыт работы. Статьи, комментарии, профиля, гостевые.
21:50 200 открытых анкорных ссылок всего за 100 рублей
21:42 XMLGold.eu (Perfect Money, Bank wire, Bitcoin, Litecoin, AdvCash, Payeer, Paypal)
21:32 Продам 8 сайтов в ГГЛ
20:38 Куплю размещение статей на англоязычных ресурсах
20:13 ТиЦ 250. Игровой сайт
19:59 Качественные профильные и статейные прогоны хрумером по своим базам!

22:35 Дробим высокочастотный запрос на СЧ и НЧ в директе
21:52 Трудовой стаж для фрилансеров в Украине?
20:20 Активация аккаунта адсенс
20:02 301 redirect
18:03 Осенний чат на форуме / говорите о своём
17:29 Мануал как можно заработать деньги на финансовой партнерке Share4you
17:13 [CPT]#CRYPTAUR- магазин децентрализованных приложений.

17.09.2017 19:37	10 хуков для Вордпресс
13.09.2017 01:53	Файл русификации classipress
11.09.2017 09:51	Помощь по Wordpress
10.09.2017 20:38	Валидация микроразметки
10.09.2017 18:47	Как вывести только на главной