Сайт на WP

Цитата
Дмитрий Смирнов пишет: При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело? Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг.
Лично я вот такой роботс на вп пользую

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml

Новые темы	Объявления	Свободное общение
00:22 TeaserNet - тизерная сеть нового поколения! Высокие доходы, стабильные выплаты 00:00 Выбор ключевых слов для главной страницы 23:23 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 19:56 ClickDealer- свои люди на рынке буржа! 18:57 WelcomePartners – ведущая гемблинг партнерка рунета! 16:44 Adsense личный опыт 14:31 Тизерная сеть "Облако Кликов" – новостной трафик с крупнейших СМИ Рунета	00:05 [Бесплатный тест] Топовые мобильные прокси RU, UA, UK. AIRSOCKS 3G / 4G / LTE. С подменой Passive OS fingerprint (Windows / Mac / Android / iPhone) 20:31 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 18:05 Оформление группы Вконтакте, создаем уникальный дизайн 16:43 Продам аккаунт Облако@Mail.ru на 1Tb 400р 16:26 Внешнее продвижение сайтов качественно! Быстрое выполнение, на форуме с 2009 года! 15:16 «Взрываем языковые преграды» – переводим любые тексты 13:31 Настройки ленты на плагин Wpgrabber для WordPress	00:28 Продвижение сайта через Вконтакте? 23:55 Натуральные VS Искусственные 23:52 Партнерская программа №1 в РФ по ремонту компьютерной и бытовой техники! (CPA 1000р) 21:39 Где и как встретите Новый год? 17:06 Lucky.Online - собственные офферы, КЦ 24/7, стабильно высокий апрув 14:58 Новая тизерная сеть Actionteaser.ru 12:17 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок

Новые темы

Объявления

Свободное общение

00:22 TeaserNet - тизерная сеть нового поколения! Высокие доходы, стабильные выплаты
00:00 Выбор ключевых слов для главной страницы
23:23 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт!
19:56 ClickDealer- свои люди на рынке буржа!
18:57 WelcomePartners – ведущая гемблинг партнерка рунета!
16:44 Adsense личный опыт
14:31 Тизерная сеть "Облако Кликов" – новостной трафик с крупнейших СМИ Рунета

00:05 [Бесплатный тест] Топовые мобильные прокси RU, UA, UK. AIRSOCKS 3G / 4G / LTE. С подменой Passive OS fingerprint (Windows / Mac / Android / iPhone)
20:31 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc
18:05 Оформление группы Вконтакте, создаем уникальный дизайн
16:43 Продам аккаунт Облако@Mail.ru на 1Tb 400р
16:26 Внешнее продвижение сайтов качественно! Быстрое выполнение, на форуме с 2009 года!
15:16 «Взрываем языковые преграды» – переводим любые тексты
13:31 Настройки ленты на плагин Wpgrabber для WordPress

00:28 Продвижение сайта через Вконтакте?
23:55 Натуральные VS Искусственные
23:52 Партнерская программа №1 в РФ по ремонту компьютерной и бытовой техники! (CPA 1000р)
21:39 Где и как встретите Новый год?
17:06 Lucky.Online - собственные офферы, КЦ 24/7, стабильно высокий апрув
14:58 Новая тизерная сеть Actionteaser.ru
12:17 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок

12.12.2018 21:17	Как сделать отметку на видео Вы остановились?
12.12.2018 16:36	WP + woocommerce
10.12.2018 14:43	Кроме главной ничего не грузится
09.12.2018 02:57	WordPress 5.0 и Gutenberg. Ошибка Warning: Invalid argument supplied for foreach() in /home/jorroodu/domains/umate.pro/wp-includes/blocks.php on line 183
07.12.2018 17:43	Проблема с кнопкой распечатать схему