Вопрос по robots.txt для WordPress
Страницы: 1
Вопрос по robots.txt для WordPress
Нашел такой вариант и думаю, что нормально, т.к. ставил уже на один из блогов, но только щас подумал.. в строчке Host стоит приоритетный домен (с www), но я не использую такой вариан. Как правильно изменить данную строчку, просто убрать www или как то по особенному? smile:)

Код
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: www.yourdomain.ru

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments

Sitemap: <a href=\"http://yourdomain.ru/sitemap.xml\" target=\"_blank\">http://yourdomain.ru/sitemap.xml</a>
Хостинг Beget на СУПРе
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
10:27 Как безопасно купить Гугл почту? 
09:57 Статистика по "альтернативе": Есть ли смысл сейчас добавлять сайт в Rambler/Mail? 
05:23 29.01. Апдейт: Шторм // Вчера отдали 3% с оборота? 
05:22 Продвижение-2022: Гугл все? Нет – Гугл не все! 
23:28 че по ПФ щас реально работает?? (кроме старья) 
23:26 [AI] Qwen3-Max Thinking: Алибаба подвинула DeepSeek и Gemini? 
10:40 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 
06:03 [MOBILE 4G/LTE PROXY] Приватные Мобильные Прокси 30 Дней 10$ Безлим/ Подходят для всех сайтов 
04:11 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
23:03 SOCKS5 приватные прокси на 30 дней для PayPal 
23:02 Google Voice аккаунты для бесплатных SMS и звонков 
23:02 PayPal аккаунты для любых целей 
16:44 CryptoMonitor.info - ваш надеждный обменник BTC USDT XMR (без KYC) 
14:38 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
05:50 Ставки на супер тренды в спорте 
23:24 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
22:57 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем 
06:57 блокировка youtube 2026: ркн начинает «выдавливание». кто уже пробовал вк видео? 
15:18 Win 10: Три месяца без обновлений. Как полёт? // Переезд на Win 11 или Linux 
16:25 Подтягиваем физкультурку 
08:18 Тренера "Сочи" обвинили, что он рулил через ChatGPT. Игрокам предложили не спать 28 часов