Сайт на WP

Цитата
Дмитрий Смирнов пишет: При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело? Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг.
Лично я вот такой роботс на вп пользую

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml

Новые темы	Объявления	Свободное общение
22:26 Создание и ведение нового блога 18:57 Яндекс выдача - 18.08.18 18:44 Экспертность автора для алгоритмов гугла 15:32 Выдача в гугле 09:52 Гугл порезал трафик или где мой трафик, чувак? 09:16 ГУГЛ ИСКЛЮЧАЕТ СТРАНИЦЫ Обнаружена, не проиндексирована 460 СТР 23:33 Помогите найти плагин RSS - экспорта Wordpress	21:04 добротный перевод, рерайт, копирайт по адекватной цене 20:37 Продам интим сайт / готовый бизнес 19:09 Куплю канал Яндекс Дзен с монетизацией 17:34 Прогон по твиттеру, постинг в 1500 аккунтов, ускорение индексации и переиндексация сайтов, сателлитов, дорвеев и ссылок с прогонов 17:23 Оптимизация скриптов сайта и чистка от вредоносного кода 17:22 Пишу парсеры контента 17:22 Пишу модули для DLE	19:38 Bitcoin cash 18:39 Правильная покупка ссылок 17:33 Работа для вебмастеров. 625 долл/сутки? - легко! 15:56 Продам активный бурж инстаграм 15:30 Что с рублем? 01:08 Продам паблик вк, инста 00:01 Прямоугольник на сайте

Новые темы

Объявления

Свободное общение

22:26 Создание и ведение нового блога
18:57 Яндекс выдача - 18.08.18
18:44 Экспертность автора для алгоритмов гугла
15:32 Выдача в гугле
09:52 Гугл порезал трафик или где мой трафик, чувак?
09:16 ГУГЛ ИСКЛЮЧАЕТ СТРАНИЦЫ Обнаружена, не проиндексирована 460 СТР
23:33 Помогите найти плагин RSS - экспорта Wordpress

21:04 добротный перевод, рерайт, копирайт по адекватной цене
20:37 Продам интим сайт / готовый бизнес
19:09 Куплю канал Яндекс Дзен с монетизацией
17:34 Прогон по твиттеру, постинг в 1500 аккунтов, ускорение индексации и переиндексация сайтов, сателлитов, дорвеев и ссылок с прогонов
17:23 Оптимизация скриптов сайта и чистка от вредоносного кода
17:22 Пишу парсеры контента
17:22 Пишу модули для DLE

19:38 Bitcoin cash
18:39 Правильная покупка ссылок
17:33 Работа для вебмастеров. 625 долл/сутки? - легко!
15:56 Продам активный бурж инстаграм
15:30 Что с рублем?
01:08 Продам паблик вк, инста
00:01 Прямоугольник на сайте

17.08.2018 20:01	Помогите найти плагин RSS - экспорта Wordpress
17.08.2018 12:11	Импорт в WordPress
15.08.2018 14:33	Вы реально покупаете вордпрес?
15.08.2018 08:19	Прошу помочь с выбором темы или плагина.
15.08.2018 07:35	Можно ли удалить редиректы wordpress