Сайт на WP

Цитата
Дмитрий Смирнов пишет: При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело? Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг.
Лично я вот такой роботс на вп пользую

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml

Новые темы	Объявления	Свободное общение
22:45 Биржа купли-продажи сайтов, каналов и сообществ 22:08 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках 21:45 Телега на ручнике: РКН включил замедление и логи админок покраснели 22:13 SEO под нейро 15:57 Раскрутка форума 11:48 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу 13:07 MAX выкатил приватные каналы - закрытые тусы теперь лепишь за минуту	09:37 BestChange – обменивать электронную валюту можно быстро и выгодно 09:05 Swapwatch.org — Мониторинг криптовалютных обменников 21:22 Bcon.Global - [no kyc] crypto gateway ( платежное решение для вашего сайта ) 19:52 EM24.biz - обмен валют 13:15 SiteAnalyzer SEO Tools - бесплатное браузерное расширение для Chrome & Firefox 13:14 TETChange-Обменник криптовалют 08:58 Monitex: Мониторинг с кэшбэком 80% в USDT	00:10 Ставки на супер тренды в спорте 23:44 Точные прогнозы на футбол 21:50 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 21:39 Добро пожаловать в цифровой мир... 16:39 Оцифровка старых физических фотографий 13:55 Туалетные секреты: Замурчательная тема 18:43 Индия влепила Intel 3 ляма баксов за дискриминацию по гарантии

Новые темы

Объявления

Свободное общение

22:45 Биржа купли-продажи сайтов, каналов и сообществ
22:08 Гугл пухнет от кеша, а нам - крошки. Разбор $114 млрд: Адсенс в минусе, Ютуб на подписках
21:45 Телега на ручнике: РКН включил замедление и логи админок покраснели
22:13 SEO под нейро
15:57 Раскрутка форума
11:48 WB и Ozon - новые "русские поисковики"? Яндекс теряет коммерческую выдачу
13:07 MAX выкатил приватные каналы - закрытые тусы теперь лепишь за минуту

09:37 BestChange – обменивать электронную валюту можно быстро и выгодно
09:05 Swapwatch.org — Мониторинг криптовалютных обменников
21:22 Bcon.Global - [no kyc] crypto gateway ( платежное решение для вашего сайта )
19:52 EM24.biz - обмен валют
13:15 SiteAnalyzer SEO Tools - бесплатное браузерное расширение для Chrome & Firefox
13:14 TETChange-Обменник криптовалют
08:58 Monitex: Мониторинг с кэшбэком 80% в USDT

00:10 Ставки на супер тренды в спорте
23:44 Точные прогнозы на футбол
21:50 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео?
21:39 Добро пожаловать в цифровой мир...
16:39 Оцифровка старых физических фотографий
13:55 Туалетные секреты: Замурчательная тема
18:43 Индия влепила Intel 3 ляма баксов за дискриминацию по гарантии

21.01.2026 16:05	Почему ваш сервер тормозит: это не DDOS, это нейросети "кушают" ваш контент
01.05.2025 18:53	Настройка плагина для wordpress Price Shop
11.04.2025 17:42	Создание сайтов стало проще: WordPress представляет AI-инструмент
21.03.2025 19:38	Владельцы сайтов на WordPress под угрозой: как вредонос DollyWay крадёт ваш трафик
12.03.2025 18:50	Как сделать ссылку видимой на вордпресс тема Jarida ?