Сайт на WP
Страницы: 1
Сайт на WP, Проблема с robots.txt
При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело?
Спасибо!

Комплексное SEO продвижение в поисковых системах Яндекс, Google

Цитата
Дмитрий Смирнов пишет:
При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело?
Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг. 
Лично я вот такой роботс на вп пользую 

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
00:22 В поиске страниц 0 
23:38 Нужно поменять сертификат безопасности с http на https 
21:54 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 
19:15 Индексация в Гугл хуже чем в Яндекс 
16:46 Ссылочное продвижение сайта 2020 
15:17 Adtrafico - Правильная партнёрская сеть под бурж трафик 
14:11 Нужно создать букс (на местной валюте) 
21:44 Аккаунты Google Play Developer Console 
19:50 OkSender – программа для продвижения в социальной сети Одноклассники. 
14:44 Piter.PEN16 Анонимный обмен без AML/KYC 
14:39 Аккаунты Google Play Developer Console 
14:36 Любые задачи на С++ 
14:23 Трафик по ключевым словам из поисковиков 
13:23 Обменник криптовалют WekSell 
16:44 Я отходил от компьютера 
16:41 Влияние лета на заработок 
16:31 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
20:24 МТС нехорошие люди 
19:51 Ставки в БК 
12:53 Accvk.ru - магазин самых надёжных аккаунтов вконтакте и других социальных сетей [без владельцев] 
09:35 Отзывы о сервисе Linkbuilder