Сайт на WP

Цитата
Дмитрий Смирнов пишет: При проверке сайта www.dtlc.ru разные сервисы (cy-pr, seopult) выдают "Файл robots.txt не настроен". Также супр пишет что и sitemap не настроенМожет кто нибудь помочь разобраться в чем дело? Спасибо!

Найдите любой популярный сайт на ВП, скопируйте у него роботс, подставьте в нужных местах свой домен и залейте на хостинг.
Лично я вот такой роботс на вп пользую

Цитата

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: /comments
Disallow: */comments
Disallow: */*/feed/*/
Disallow: */feed
Crawl-delay: 4
Host: mysite.ru

Sitemap: http://mysite.ru/sitemap.xml.gz
Sitemap: http://mysite.ru/sitemap.xml

Новые темы	Объявления	Свободное общение
12:05 DLE не создает бэкап с админки сайта, как быть? 11:52 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026 11:45 Rotapost прикрыли! Чем пользоваться? 11:29 Стоит ли добавлять сайт в Rambler топ 100? 18:52 SEO под нейро 15:55 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 15:15 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.	16:25 CryptoMonitor.info - ваш надеждный обменник BTC USDT XMR (без KYC) 15:24 №1 Рассылка / Инвайтинг [TELEGRAM] \| Приватный метод 15:24 Trustpilot Reviews \| Подниму рейтинг вашей компании 15:23 Продвижение YouTube видео в топ поиска \| Любой тип контента \| Гарантия результата 15:23 Установка\|Настройка\|Доработка\|Наполнение сайтов\|Дизайн\|3D\|Видеомонтаж 14:33 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 13:54 ⭐ Xneolinks - мощный инструмент для продвижения ваших сайтов! ☑️ Бесплатный триал!	15:52 Компьютерная мышь 11:32 Про мясо 22:11 С юмором по жизни! 23:03 Точные прогнозы на футбол 13:08 Бесплатный майнинг Tether (USDT) 16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир...

Новые темы

Объявления

Свободное общение

12:05 DLE не создает бэкап с админки сайта, как быть?
11:52 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026
11:45 Rotapost прикрыли! Чем пользоваться?
11:29 Стоит ли добавлять сайт в Rambler топ 100?
18:52 SEO под нейро
15:55 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
15:15 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.

16:25 CryptoMonitor.info - ваш надеждный обменник BTC USDT XMR (без KYC)
15:24 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод
15:24 Trustpilot Reviews | Подниму рейтинг вашей компании
15:23 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата
15:23 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж
14:33 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик]
13:54 ⭐ Xneolinks - мощный инструмент для продвижения ваших сайтов! ☑️ Бесплатный триал!

15:52 Компьютерная мышь
11:32 Про мясо
22:11 С юмором по жизни!
23:03 Точные прогнозы на футбол
13:08 Бесплатный майнинг Tether (USDT)
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру
20:43 Добро пожаловать в цифровой мир...

01.05.2025 18:53	Настройка плагина для wordpress Price Shop
11.04.2025 17:42	Создание сайтов стало проще: WordPress представляет AI-инструмент
21.03.2025 19:38	Владельцы сайтов на WordPress под угрозой: как вредонос DollyWay крадёт ваш трафик
12.03.2025 18:50	Как сделать ссылку видимой на вордпресс тема Jarida ?
14.02.2025 16:44	Рассыпались ссылки из панели управления.