Сайт на WP

Цитата
Дмитрий Смирнов пишет: При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело? Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг.
Лично я вот такой роботс на вп пользую

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml

Новые темы	Объявления	Свободное общение
17:24 Ап выдачи Яндекса 8 апреля - есть движение, но интереснее что творится с AI-ответами Google 17:10 ИКС Яндекс АПдейт 1 апреля 2026. Обновлён алгоритм расчёта 16:59 Google начал жёстко давить за манипуляции + апдейт Яндекса 16 апреля - у кого что изменилось 16:56 Голод на биржах: Всё приличное уже выкуплено. Куда нести остатки бюджета? 16:53 биржи в 26-м окончательно сдохли или кто-то еще ковыряет этот шлак? 16:51 Апдейт 14 апреля: ощущение, что режет не только выдача 16:40 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов?	18:56 Sphera \| круглосуточный обмен, наличные 18:11 Phoenix - Выгодный обмен электронных валют, без верификации 17:05 Trustpilot Reviews \| Подниму рейтинг вашей компании 17:00 №1 Рассылка / Инвайтинг [TELEGRAM] \| Приватный метод 16:58 Продвижение YouTube видео в топ поиска \| Любой тип контента \| Гарантия результата 16:55 Установка\|Настройка\|Доработка\|Наполнение сайтов\|Дизайн\|3D\|Видеомонтаж 15:54 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру	16:33 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 16:29 С юмором по жизни! 16:24 Всех с праздником! 22:41 Ставки на супер тренды в спорте 12:47 Добро пожаловать в цифровой мир... 06:27 Точные прогнозы на футбол 06:07 Список обновленных тем пуст...

Новые темы

Объявления

Свободное общение

17:24 Ап выдачи Яндекса 8 апреля - есть движение, но интереснее что творится с AI-ответами Google
17:10 ИКС Яндекс АПдейт 1 апреля 2026. Обновлён алгоритм расчёта
16:59 Google начал жёстко давить за манипуляции + апдейт Яндекса 16 апреля - у кого что изменилось
16:56 Голод на биржах: Всё приличное уже выкуплено. Куда нести остатки бюджета?
16:53 биржи в 26-м окончательно сдохли или кто-то еще ковыряет этот шлак?
16:51 Апдейт 14 апреля: ощущение, что режет не только выдача
16:40 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов?

16:33 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко
16:29 С юмором по жизни!
16:24 Всех с праздником!
22:41 Ставки на супер тренды в спорте
12:47 Добро пожаловать в цифровой мир...
06:27 Точные прогнозы на футбол
06:07 Список обновленных тем пуст...

08.04.2026 16:43	Ninja Forms дырявый - можно залить файл без авторизации и получить доступ к сайту
21.01.2026 16:05	Почему ваш сервер тормозит: это не DDOS, это нейросети "кушают" ваш контент
01.05.2025 18:53	Настройка плагина для wordpress Price Shop
11.04.2025 17:42	Создание сайтов стало проще: WordPress представляет AI-инструмент
21.03.2025 19:38	Владельцы сайтов на WordPress под угрозой: как вредонос DollyWay крадёт ваш трафик