Robots.txt
Страницы: 1
Robots.txt
Подскажите обязательно ли прописывать файл роботс или можно оставить разрешение индексировать все для вордпресс?

Если не трудно, напишите robots.txt для вордпрес 3.1

И еще вопрос, вот я создал файл роботс в корне домена, будет ли он расспростроняться на поддомены созданные по технологии мультисайт на вордпресс( эти суб домны не отображаются почему то на хостинге и прописать роботс на каждый нет возможности, поэтому еще проблема с внесением урл карты сайта для поддоменов, сейчас роботс автоматический разрешающий индексировать все для всех пауков и автоматически размещает карту сайта для каждого поддомена в нем.)

Спасибо!
вот мой роботs
Насчет субдоменов не знаю-не практиковал такого)
Я вот посмотрел, у вас теги и фиды коментариев все равно гогл индексирует smile:mad:
viktor2011, потому что закрыл недавно и сопли еще остались и эти страницы, со временем выпасть должны)
А яндекс индексирует page,

А какие последствия дублирования контента сайта, тем же сайтом? Т.Е. если все же оставить разрешение на индексацию всего на сайте?
В целом вроде бы разобрался, залил роботс на каждый поддомен, спасибо за шаблон роботса!

Подскажите еще нужно ли поддомену прописывать директиву host типа aaa.aaaa.aa или на основной домен типо aaaa.aa?

Спасибо! smile:confused:
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
18:09 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
15:06 Влияние ссылок буржнете 
10:53 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам). 
08:36 Обновления интерфейса яндекс метрики 
15:13 Рапида умерла. Куда выводить с AdSense? 
15:05 Чем заменили ТИЦ? 
15:01 Profit Pixels - In-House Форекс, Крипто, Трейдинг CPA Офферы | Еженедельные Выплаты | CPA до $950 
11:54 Transit-Bit.com - Обмен USDT на IDR, THB, RUB и наличные 
10:21 [eBucks] Автоматический обмен криптовалют. BTC и любые альткоины. Киви, Банковские карты и др. электронные системы. 
22:15 Криптовалютный обменник Xgram.io - новое воплощение качества 
15:49 Проверка на индекс в Telegram боте @SpeedyIndexbot 
13:47 HidMark.com - естественные ссылки от 1.5$ Естественные ссылки. Крауд-маркетинг. 
12:05 USMobileSMSBot - 
11:16 4G/LTE Mobile Proxy 30+ geo  
12:30 В России снизили беспошлинный порог для онлайн-покупок 
12:25 Binance будет передавать данные о транзакциях свыше $1 тыс. 
22:48 150+ хакерских поисковых систем и инструментов 
22:43 Точные прогнозы на футбол 
19:49 Текст.ру преподнёс "подарок" 
18:12 Подтягиваем физкультурку 
13:30 Тренды заработка 2024-2025