Сайт на WP

Цитата
Дмитрий Смирнов пишет: При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело? Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг.
Лично я вот такой роботс на вп пользую

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml

Новые темы	Объявления	Свободное общение
06:37 Работает ли ссылочное продвижение 2019 – 2020? 05:09 Не растет трафик с гугла, в чем может быть причина? 01:06 Продвижение в яндексе профиля instagram 19:46 AviTool - мощный инструмент для автоматизации работы с Avito 19:14 Закупка ссылок 19:13 4 декабря АП Выдача \| Посещаемость изменилась? 16:18 Добро пожаловать в Google Новости!	02:07 Веб-разработчик 23:15 Продам сайт "Советы старого фарцовщика" 19:47 Комплексная раскрутка сайтов. Качественные услуги, прогоны и прочее. (3000+ отзывов) 18:39 Куплю ссылки с сайтов туристической тематики 18:06 Куплю сайт азартной тематики 16:49 Разрабатываю современные сайты под ключ! 14:16 Услуги постинга в социальные сети для продвижения, индексации и увеличения социальной активности	02:34 Инстаграм по городам 20:47 Коллективная покупка шаблона (темы) для Wordpres 20:09 Нужен софт (Спамер) 18:23 Опыт в продвижения в крупных проектах 00:41 500 000 рублей за 1 000 000 просмотров и это не потолок 00:33 Спасёт ли ссылка на источник? 20:28 Как создать ярлык для перехода в спящий режим?

Новые темы

Объявления

Свободное общение

06:37 Работает ли ссылочное продвижение 2019 – 2020?
05:09 Не растет трафик с гугла, в чем может быть причина?
01:06 Продвижение в яндексе профиля instagram
19:46 AviTool - мощный инструмент для автоматизации работы с Avito
19:14 Закупка ссылок
19:13 4 декабря АП Выдача | Посещаемость изменилась?
16:18 Добро пожаловать в Google Новости!

02:07 Веб-разработчик
23:15 Продам сайт "Советы старого фарцовщика"
19:47 Комплексная раскрутка сайтов. Качественные услуги, прогоны и прочее. (3000+ отзывов)
18:39 Куплю ссылки с сайтов туристической тематики
18:06 Куплю сайт азартной тематики
16:49 Разрабатываю современные сайты под ключ!
14:16 Услуги постинга в социальные сети для продвижения, индексации и увеличения социальной активности

02:34 Инстаграм по городам
20:47 Коллективная покупка шаблона (темы) для Wordpres
20:09 Нужен софт (Спамер)
18:23 Опыт в продвижения в крупных проектах
00:41 500 000 рублей за 1 000 000 просмотров и это не потолок
00:33 Спасёт ли ссылка на источник?
20:28 Как создать ярлык для перехода в спящий режим?

02.12.2019 13:34	Как подчеркнуть ссылки в тексте
30.11.2019 21:13	Не загружаются картинки
28.11.2019 09:56	Как сделать так, чтобы счётчик просмотров на сайте WordPress работал правильно?
21.11.2019 20:52	Помогите настроить сайт
04.11.2019 03:08	Решено: справочник с алфавитной навигацией на wp