Сайт на WP
Страницы: 1
Сайт на WP, Проблема с robots.txt
При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело?
Спасибо!

Бесплатная контекстная реклама

Цитата
Дмитрий Смирнов пишет:
При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело?
Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг. 
Лично я вот такой роботс на вп пользую 

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
03:32 Выдача 23.01 
21:16 Купил сайт и забросил 
21:41 Neogara – партнерская программа с крипто офферами 
18:01 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
17:14 Навигация на сайте 
16:29 CPA-сеть MyLead - глобальная монетизация трафика! 
15:59 Golden Goose - WAP Click партнерка с inhouse офферами 
02:12 Coindrop.trade - обменник электронных валют 
01:00 One Exchange - Сервис обмена электронных валют и токенов 
21:39 Накрутка Promodj 
20:39 Качественные тексты от талантливого копирайтера 
01:06 [Бесплатный тест] Сеть резидентных прокси ASTROPROXY – mobile, datacenter, residential proxies для Вашего бизнеса 
23:10 LovePartners - дейтинг партнерка с собственным эксклюзивным оффером 
15:46 Oborot.net - обмен валют онлайн 
21:58 37 противникам прививок от COVID грозят уголовные дела 
18:47 Для киберспортсменов утвердили нормативы по бегу и приседаниям 
18:46 Впервые в истории YouTube ролик собрал более 10 млрд просмотров 
18:45 20 000 000 просмотров за месяц 
16:57 Миллионеры потребовали собирать с них больше налогов 
01:18 Insolvo.com - партнёрская программа с пожизненными 20% 
23:00 Продвижение. Заработок. Можно ли продвинуться и заработать.