Сайт на WP
Страницы: 1
Сайт на WP, Проблема с robots.txt
При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело?
Спасибо!

Бесплатная контекстная реклама

Цитата
Дмитрий Смирнов пишет:
При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело?
Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг. 
Лично я вот такой роботс на вп пользую 

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
14:14 ClickDealer- свои люди на рынке буржа! 
14:09 Заработали на "с днем Святого Валентина"? | 16 февраля 2020 Текстовый апдейт: выложен индекс 
13:03 Зарабатывай до 50% за сейл с партнерской программой EssayPro! 
00:44 Усиление ссылок реальными переходами 
23:17 Сайт не поднимается выше 3-4 страницы. 
23:00 А-ап.. а у тебя увеличился? | 9 февраля 2020 воскресенье Апдейт Яндекс выдача 
22:45 Нужна программа для раскрутки сайта 
14:59 Куплю сайты 
14:55 Профильный прогон 200 рублей, Тиц (Икс) от 10, проверен Checktrust 
14:45 Нужно обменять WMZ на Приват24 или Киви (без привязки) 
14:09 Продам 3 сайта разных тематик 
14:01 Walkman bot professional - повышение позиций в поиске поведенческими факторами. 
13:31 Статейное продвижение сайтов. Качественные доноры с высокими показателями ИКС и траста, не заспамленные. Хорошая индексируемость доноров. Качественные уникальные статьи (копирайт) 
13:01 Подключу бесплатный Интернет и не только 
14:40 Актуальные клиентские базы на любую тематику!!! 
14:35 vc.ru: «Яндекс» подал заявку на регистрацию товарного знака «Яндекс.Инвестиции» 
14:34 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
14:17 Клуб желающих посмотреть фильмы жанра "ужас", "мистика" 
14:05 Дропшиппинг как заработок в интернете! Продажа одежды, обуви и аксессуаров! 887 лидов за 90 дней дней БЕЗ ВЛОЖЕНИЙ! 12000$ На Пассиве! 
13:56 Коронавирус 
22:52 Можно ли купить акции компаний РФ гражданину Украины?